CN112399096B - 一种视频处理方法、设备及计算机可读存储介质 - Google Patents

一种视频处理方法、设备及计算机可读存储介质 Download PDF

Info

Publication number
CN112399096B
CN112399096B CN201910757251.7A CN201910757251A CN112399096B CN 112399096 B CN112399096 B CN 112399096B CN 201910757251 A CN201910757251 A CN 201910757251A CN 112399096 B CN112399096 B CN 112399096B
Authority
CN
China
Prior art keywords
frame image
target
image
video
game ball
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910757251.7A
Other languages
English (en)
Other versions
CN112399096A (zh
Inventor
钟宜峰
莫东松
张进
马丹
张健
赵璐
马晓琳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
MIGU Culture Technology Co Ltd
Original Assignee
China Mobile Communications Group Co Ltd
MIGU Culture Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd, MIGU Culture Technology Co Ltd filed Critical China Mobile Communications Group Co Ltd
Priority to CN201910757251.7A priority Critical patent/CN112399096B/zh
Publication of CN112399096A publication Critical patent/CN112399096A/zh
Application granted granted Critical
Publication of CN112399096B publication Critical patent/CN112399096B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种视频处理方法、设备及计算机可读存储介质，涉及视频处理技术领域，以解决现有的视频剪辑效率较低的问题。该方法包括：在采集的目标赛事的当前帧图像中，获取比赛用球的位置关系参数；基于所述位置关系参数，在所述视频图像中确定目标视频图像；利用所述目标视频图像，获得待剪辑的目标视频片段。本发明实施例可提高视频剪辑的效率。

Description

一种视频处理方法、设备及计算机可读存储介质
技术领域
本发明涉及视频处理技术领域，尤其涉及一种视频处理方法、设备及计算机可读存储介质。
背景技术
目前，斯诺克比赛视频的剪辑，通常由剪辑人员先观看完斯诺克比赛全程，再挑选出其中的精彩判断并进行剪辑。由此可以看出，现有的视频剪辑方法效率较低。
发明内容
本发明实施例提供一种视频处理方法、设备及计算机可读存储介质，以解决现有的视频剪辑效率较低的问题。
第一方面，本发明实施例提供了一种视频处理方法，包括：
采集视频图像；
对于所述视频图像中的当前帧图像，获取比赛用球的位置关系参数；
基于所述位置关系参数，在所述视频图像中确定目标视频图像；
利用所述目标视频图像，获得待剪辑的目标视频片段。
其中，所述获取比赛用球的位置关系参数，包括：
在所述当前帧图像中，确定第一类型比赛用球的中心点的位置坐标；
根据所述位置坐标，获取所述位置关系参数，其中，所述位置关系参数包括：
所述当前帧图像中所述第一类型比赛用球的第一数量；
所述第一类型比赛用球的中心点的位置坐标中，最大的横坐标和最小的横坐标之差；
所述第一类型比赛用球的中心点的位置坐标中，最大的纵坐标和最小的纵坐标之差；
所述第一类型比赛用球中，目标比赛用球的第二数量，所述目标比赛用球为在所述第一类型比赛用球中横坐标最大的第一类型比赛用球。
其中，所述基于所述位置关系参数，在所述视频图像中确定目标视频图像，包括：
在满足以下条件的情况下，在所述视频图像中确定目标视频图像：
所述第一数量等于第一预设值；
所述最大的横坐标和最小的横坐标之差为第二预设值；
所述最大的纵坐标和最小的纵坐标之差为第三预设值；
所述第二数量等于第四预设值。
其中，所述在所述视频图像中确定目标视频图像，包括：
利用所述当前帧图像作为起始帧图像；
根据所述当前帧图像，确定结束帧图像；
将所述起始帧图像、所述起始帧图像和所述结束帧图像之间的图像以及所述结束帧图像，作为所述目标视频图像。
其中，所述根据所述当前帧图像，确定结束帧图像，包括：
从所述当前帧图像开始，对于采集时间在所述当前帧图像的采集时间之后的第一目标帧图像，将所述第一目标帧图像的前一帧图像和所述第一目标帧图像的再前一帧图像进行比对，获得第一比对结果，以及将所述第一目标帧图像和所述第一目标帧图像的前一帧图像进行比对，获得第二比对结果；
在所述第一比对结果表示任意一个或者多个比赛用球的位置发生了变化，且所述第二比对结果表示没有出现比赛用球的位置发生变化的现象情况下，将所述第一目标帧图像作为所述结束帧图像。
其中，所述获取比赛用球的位置关系参数，包括：
在所述当前帧图像中，确定第一类型比赛用球的中心点的第一位置坐标、第二类型比赛用球的中心点的第二位置坐标和第三类型比赛用球的中心点的第三位置坐标；
根据所述第一位置坐标、所述第二位置坐标和所述第三位置坐标，获取任意一个第三类型比赛用球的中心点到目标连线的距离；
其中，所述目标连线为所述第二类型比赛用球的中心点和任意一个所述第一类型比赛用球的中心点之间的连线。
其中，所述基于所述位置关系参数，在所述视频图像中确定目标视频图像，包括：
在所述距离小于第五预设值的情况下，在所述视频图像中确定目标视频图像。
其中，所述在所述视频图像中确定目标视频图像，包括：
利用第二目标帧图像作为起始帧图像，其中，所述第二目标帧图像的采集时间在所述当前帧图像的采集时间之前；
从所述当前帧图像开始，对于采集时间在所述当前帧图像的采集时间之后的第三目标帧图像，将所述第三目标帧图像的前一帧和所述第三目标帧图像的再前一帧图像进行比对，获得第三比对结果，以及将所述第三目标帧图像和所述第三目标帧图像的前一帧图像进行比对，获得第四比对结果；
在所述第三比对结果表示任意一个或者多个比赛用球的位置发生了变化，且所述第四比对结果表示没有出现比赛用球的位置发生变化的现象的情况下，将所述第三目标帧图像作为结束帧图像；
将所述起始帧图像、所述起始帧图像和所述结束帧图像之间的图像以及所述结束帧图像，作为所述目标视频图像；
其中，所述第二目标帧图像具有以下特征：
所述第二目标帧图像的前一帧图像和所述第二目标帧图像的再前一帧图像相比，没有出现比赛用球的位置变化的现象；所述第二目标帧图像和所述第二目标帧图像的前一帧图像相比，任意一个或者多个比赛用球的位置发生了变化。
其中，所述方法还包括：
确定所述目标视频片段对应的目标事件；
为所述目标视频片段设置标识，所述标识用于表示所述目标事件的信息。
第二方面，本发明实施例提供一种视频处理设备，包括：收发机、存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序；所述处理器，用于读取存储器中的程序实现如前述任一项所述的方法中的步骤。
第三方面，本发明实施例提供一种计算机可读存储介质，用于存储计算机程序，所述计算机程序被处理器执行时实现如前述任一项所述的方法中的步骤。
在本发明实施例中，通过比赛用球的位置关系参数可确定出目标视频图像，并形成待剪辑的目标视频片段，从而对目标视频片段进行剪辑。与现有技术相比，利用本发明实施例无需人工观看整个比赛的视频来确定待剪辑的片段，而是通过对采集的图像中比赛用球位置关系参数的确定即可确定出待剪辑的片段。因此，利用本发明实施例的方案，可提高视频剪辑的效率。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的视频处理方法的流程图；
图2是本发明实施例提供的视频处理装置的结构图之一；
图3是本发明实施例提供的视频处理装置中的获取模块的结构图之一；
图4是本发明实施例提供的视频处理装置中的第一确定模块的结构图之一；
图5是本发明实施例提供的视频处理装置中的获取模块的结构图；
图6是本发明实施例提供的视频处理装置中的第一确定模块的结构图之二；
图7是本发明实施例提供的视频处理装置的结构图之二；
图8是本发明实施例提供的视频处理设备的结构图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
参见图1，图1是本发明实施例提供的视频处理方法的流程图，如图1所示，包括以下步骤：
步骤101、采集视频图像。
在本发明实施例中，所述目标赛事可以指的是斯诺克比赛。在具体应用中，在斯诺克比赛现场中，可在球桌上方放置摄像设备，用来垂直向下拍摄球桌全貌。摄像设备采集到的图像数据实时传输到现场剪辑服务器。
步骤102、对于所述视频图像中的当前帧图像，获取比赛用球的位置关系参数。
对于采集到的每帧图像，在本发明实施例中，例如通过Faster RCNN(Region CNN，区域卷积神经网络)目标检测算法进行球体检测，获取桌面上每颗球的位置及颜色类别。进而，确定出比赛用球的位置关系参数。所述当前帧图像可以指的是采集到的任一帧图像。
假设在当前帧图像中，第i颗球的检测框的左上角坐标为
Figure BDA0002169161930000051
右下角坐标为
Figure BDA0002169161930000052
球体颜色为ci，ci∈{“红”，“黄”，“绿”，“咖啡”，“蓝”，“粉”，“黑”，“白”}。
球体半径
Figure BDA0002169161930000053
球i的中心点坐标为(xi,yi)，其中/>
Figure BDA0002169161930000054
Figure BDA0002169161930000055
斯诺克比赛用球，各球的半径相同。
比赛过程中球桌和摄像设备的位置均不变，因此，球桌在摄像画面中的位置也不变，假设球桌的边与摄像画面的边是平行关系。
在本发明实施例中，所述位置关系参数包括各比赛用球在图像中的位置、图像中各比赛用球之间的位置关系、图像中一种类型或者一种以上类型的比赛用球的数量等等。基于球体的颜色，可将其划分为不同的类型，如红球，白球等。
对于不同的场景，获取比赛用球的位置关系参数的方式不同，而位置关系参数所包括的内容也不同。
第一种情况，在本发明实施例中，可按照如下方式获取比赛用球的位置关系参数：在所述当前帧图像中，确定第一类型比赛用球的中心点的位置坐标。其中，所述位置关系参数可包括：所述当前帧图像中所述第一类型比赛用球的第一数量；所述第一类型比赛用球的中心点的位置坐标中，最大的横坐标和最小的横坐标之差；所述第一类型比赛用球的中心点的位置坐标中，最大的纵坐标和最小的纵坐标之差；所述第一类型比赛用球中，目标比赛用球的第二数量，所述目标比赛用球为在所述第一类型比赛用球中横坐标最大的第一类型比赛用球。例如，第一类型比赛用球可以为红球等。
第二种情况，在本发明实施例中，还可按照如下方式获取比赛用球的位置关系参数：
在所述当前帧图像中，确定第一类型比赛用球的中心点的第一位置坐标、第二类型比赛用球的中心点的第二位置坐标和第三类型比赛用球的中心点的第三位置坐标。之后，根据所述第一位置坐标、所述第二位置坐标和所述第三位置坐标，获取任意一个第三类型比赛用球的中心点到目标连线的距离；其中，所述目标连线为所述第二类型比赛用球的中心点和任意一个所述第一类型比赛用球的中心点之间的连线。例如，所述第一类型比赛用球为红球，第二类型比赛用球为白球，第三类型比赛用球为彩球(除去红球和白球之外的比赛用球)。
步骤103、基于所述位置关系参数，在所述视频图像中确定目标视频图像。
对于步骤102中的第一种情况，在满足以下条件的情况下，在所述视频图像中确定目标视频图像：
所述第一数量等于第一预设值；所述最大的横坐标和最小的横坐标之差为第二预设值；所述最大的纵坐标和最小的纵坐标之差为第三预设值；所述第二数量等于第四预设值。
其中，第一预设值、第二预设值、第三预设值和第四预设值可根据实际情况设置。
假设当前帧图像中红球集合为BR，其中，红球j中心点的坐标为(xj,yj)，
Figure BDA0002169161930000061
Figure BDA0002169161930000062
其中，
Figure BDA0002169161930000063
表示当前帧图像中各红球中心点的横坐标的最大值，/>
Figure BDA0002169161930000064
表示当前帧图像中各红球中心点的横坐标的最小值，/>
Figure BDA0002169161930000065
表示当前帧图像中各红球中心点的纵坐标的最大值，/>
Figure BDA0002169161930000066
表示当前帧图像中各红球中心点的纵坐标的最小值。
当满足如下条件时，在所述视频图像中确定目标视频图像：
(1)画面中红球数量为15；
(2)
Figure BDA0002169161930000071
(3)
Figure BDA0002169161930000072
(4)假设集合
Figure BDA0002169161930000073
则|B′R|＝5。
其中，r表示球的半径，集合B′R表示集合BR中横坐标为最大值的红球所组成的集合，|B′R|表示集合B′R中元素的个数。
在所述视频图像中确定目标视频图像的过程中，利用所述当前帧图像作为起始帧图像，根据所述当前帧图像，确定结束帧图像。之后，将所述起始帧图像、所述起始帧图像和所述结束帧图像之间的图像以及所述结束帧图像，作为所述目标视频图像。
需要说明的是，以上是在当前帧图像中获取位置关系参数，并判断位置关系参数是否满足上述条件。那么，对于直播流中的每个“当前帧图像”都可执行上述操作。那么，这样的话，可获得多个从“当前帧图像”开始的目标视频图像。对于获得的多个目标视频图像，还可经过后续处理使其合成为一个目标视频图像，以用于后续处理。
其中，按照如下方式根据所述当前帧图像，确定结束帧图像：
S11、从所述当前帧图像开始，对于采集时间在所述当前帧图像的采集时间之后的第一目标帧图像，将所述第一目标帧图像的前一帧图像和所述第一目标帧图像的再前一帧图像进行比对，获得第一比对结果，以及将所述第一目标帧图像和所述第一目标帧图像的前一帧图像进行比对，获得第二比对结果。
S12、在所述第一比对结果表示任意一个或者多个比赛用球的位置发生了变化，且所述第二比对结果表示没有出现比赛用球的位置发生变化的现象情况下，将所述第一目标帧图像作为所述结束帧图像。
在对每帧图像进行分析时，可比较当前帧图像与前两帧图像中球的位置变化情况。如果当前帧图像的前一帧图像与当前帧图像的再前一帧相比所有球的位置不变，当前帧图像与当前帧图像的前一帧图像相比有球的位置改变，则将当前帧图像的时间点定义为“运动点”；如果当前帧图像的前一帧图像与当前帧图像的再前一帧相比有球的位置改变，当前帧图像与当前帧图像的前一帧图像相比所有球的位置不变，则将当前帧图像的时间点定义为“静止点”。
也即，在这种情况下，将从当前帧图像的采集时间点到下一个“静止点”之间所有图像的作为所述目标视频片段，其中包括当前帧图像和静止点对应的图像。
对于步骤102中的第二种情况，在所述距离小于第五预设值的情况下，在所述视频图像中确定目标视频图像。其中，第五预设值可根据实际情况设置。
假设当前帧图像中红球集合为BR，当前帧图像中除白球和红球外的其他所有球的集合为
Figure BDA0002169161930000081
当前帧图像中白球的中心点坐标为(xW,yW)，对任意红球i∈BR，白球的中心点与该红球(xi,yi)的中心点连接所组成的直线可表示为：(yW-yi)x+(xi-xW)y+xWyi-xiyW＝0。
Figure BDA0002169161930000082
满足以下条件时，在所述视频图像中确定目标视频图像：
Figure BDA0002169161930000083
其中，r表示球的半径，集合
Figure BDA0002169161930000084
中任一个球的中心点的坐标为(xj,yj)。也即，在集合/>
Figure BDA0002169161930000085
中任一个球的中心点到白球的中心点与任一个红球的中心点连接所组成的直线的距离小于2的情况下，在所述视频图像中确定目标视频图像。
在这种情况下，在所述视频图像中确定目标视频图像时，可具体包括以下过程：
S21、利用第二目标帧图像作为起始帧图像，其中，所述第二目标帧图像的采集时间在所述当前帧图像的采集时间之前。
S22、从所述当前帧图像开始，对于采集时间在所述当前帧图像的采集时间之后的第三目标帧图像，将所述第三目标帧图像的前一帧和所述第三目标帧图像的再前一帧图像进行比对，获得第三比对结果，以及将所述第三目标帧图像和所述第三目标帧图像的前一帧图像进行比对，获得第四比对结果。
S23、在所述第三比对结果表示任意一个或者多个比赛用球的位置发生了变化，且所述第四比对结果表示没有出现比赛用球的位置发生变化的现象的情况下，将所述第三目标帧图像作为结束帧图像。
S24、将所述起始帧图像、所述起始帧图像和所述结束帧图像之间的图像以及所述结束帧图像，作为所述目标视频图像。
其中，所述第二目标帧图像的前一帧图像和所述第二目标帧图像的再前一帧图像相比，没有出现比赛用球的位置变化的现象；所述第二目标帧图像和所述第二目标帧图像的前一帧图像相比，任意一个或者多个比赛用球的位置发生了变化。由此可以看出，第二目标帧图像对应“运动点”。为了提高获得的视频片段中所包括的内容的有效性，所述第二目标帧图像可以是距离当前帧图像的采集时间最近的第二目标帧图像。
也就是说，从当前帧图像的采集时间点之前的“运动点”到当前帧图像的采集时间点之后的那个“静止点”之间的所有视频图像，即作为目标视频图像。其中，该“运动点”可以是距离当前帧图像的采集时间最近的“运动点”，“静止点”也可以是距离当前帧图像的采集时间最近的“静止点”。
在本发明实施例中，确定所述目标视频片段对应的目标事件，并为所述目标视频片段设置标识，所述标识用于表示所述目标事件的信息。所述信息可以是事件的类别等。例如，对于第二种情况，其对应的目标事件斯诺克事件。同时，还可给该段目标视频设置标识，所述标识用于表示所述目标事件的信息。
步骤104、利用所述目标视频图像，获得待剪辑的目标视频片段。
在本发明实施例中，通过比赛用球的位置关系参数可确定出目标视频图像，并形成待剪辑的目标视频片段，从而对目标视频片段进行剪辑。与现有技术相比，利用本发明实施例无需人工观看整个比赛的视频来确定待剪辑的片段，而是通过对采集的图像中比赛用球位置关系参数的确定即可确定出待剪辑的片段。因此，利用本发明实施例的方案，可提高视频剪辑的效率。
此外，由于无需人工参与，因此，利用本发明实施例的方案还可节省人力成本，提升准确率，减小人为因素造成的失误。
本发明实施例还提供了一种视频处理装置。参见图2，图2是本发明实施例提供的视频处理装置的结构图。由于视频处理装置解决问题的原理与本发明实施例中视频处理方法相似，因此该视频处理装置的实施可以参见方法的实施，重复之处不再赘述。
如图2所示，视频处理装置包括：采集模块201，用于采集视频图像；获取模块202，用于对于所述视频图像中的当前帧图像，获取比赛用球的位置关系参数；第一确定模块203，用于基于所述位置关系参数，在所述视频图像中确定目标视频图像；处理模块204，用于利用所述目标视频图像，获得待剪辑的目标视频片段。
其中，如图3所示，所述获取模块202可包括：
第一确定子模块2021，用于在所述当前帧图像中，确定第一类型比赛用球的中心点的位置坐标；第一获取子模块2022，用于根据所述位置坐标，获取所述位置关系参数；其中，所述位置关系参数包括：所述当前帧图像中所述第一类型比赛用球的第一数量；所述第一类型比赛用球的中心点的位置坐标中，最大的横坐标和最小的横坐标之差；所述第一类型比赛用球的中心点的位置坐标中，最大的纵坐标和最小的纵坐标之差；所述第一类型比赛用球中，目标比赛用球的第二数量，所述目标比赛用球为在所述第一类型比赛用球中横坐标最大的第一类型比赛用球。
其中，所述第一确定模块具体用于，在满足以下条件的情况下，在所述视频图像中确定目标视频图像：所述第一数量等于第一预设值；所述最大的横坐标和最小的横坐标之差为第二预设值；所述最大的纵坐标和最小的纵坐标之差为第三预设值；所述第二数量等于第四预设值。
具体的，如图4所示，所述第一确定模块203可包括：第一确定子模块2031，用于利用所述当前帧图像作为起始帧图像；第二确定子模块2031，用于根据所述当前帧图像，确定结束帧图像；第三确定子模块2033，用于将所述起始帧图像、所述起始帧图像和所述结束帧图像之间的图像以及所述结束帧图像，作为所述目标视频图像。
可选的，所述第二确定子模块2031可包括：
比较单元，用于从从所述当前帧图像开始，对于采集时间在所述当前帧图像的采集时间之后的第一目标帧图像，将所述第一目标帧图像的前一帧图像和所述第一目标帧图像的再前一帧图像进行比对，获得第一比对结果，以及将所述第一目标帧图像和所述第一目标帧图像的前一帧图像进行比对，获得第二比对结果；确定单元，用于在所述第一比对结果表示任意一个或者多个比赛用球的位置发生了变化，且所述第二比对结果表示没有出现比赛用球的位置发生变化的现象情况下，将所述第一目标帧图像作为所述结束帧图像。
其中，如图5所示，所述获取模块202可包括：
第二确定子模块2023，用于在所述当前帧图像中，确定第一类型比赛用球的中心点的第一位置坐标、第二类型比赛用球的中心点的第二位置坐标和第三类型比赛用球的中心点的第三位置坐标；第二获取子模块2024，用于根据所述第一位置坐标、所述第二位置坐标和所述第三位置坐标，获取任意一个第三类型比赛用球的中心点到目标连线的距离；其中，所述目标连线为所述第二类型比赛用球的中心点和任意一个所述第一类型比赛用球的中心点之间的连线。
其中，所述第一确定模块具体用于，在所述距离小于第五预设值的情况下，在所述视频图像中确定目标视频图像。
具体的，如图6所示，所述第一确定模块203可包括：
第四确定子模块2034，用于利用第二目标帧图像作为起始帧图像，其中，所述第二目标帧图像的采集时间在所述当前帧图像的采集时间之前；比较子模块2035，用于从所述当前帧图像开始，对于采集时间在所述当前帧图像的采集时间之后的第三目标帧图像，将所述第三目标帧图像的前一帧和所述第三目标帧图像的再前一帧图像进行比对，获得第三比对结果，以及将所述第三目标帧图像和所述第三目标帧图像的前一帧图像进行比对，获得第四比对结果；第五确定子模块2036，用于在所述第三比对结果表示任意一个或者多个比赛用球的位置发生了变化，且所述第四比对结果表示没有出现比赛用球的位置发生变化的现象的情况下，将所述第三目标帧图像作为结束帧图像；第六确定子模块2037，用于将所述起始帧图像、所述起始帧图像和所述结束帧图像之间的图像以及所述结束帧图像，作为所述目标视频图像。
其中，所述第二目标帧图像具有以下特征：
所述第二目标帧图像的前一帧图像和所述第二目标帧图像的再前一帧图像相比，没有出现比赛用球的位置变化的现象；所述第二目标帧图像和所述第二目标帧图像的前一帧图像相比，任意一个或者多个比赛用球的位置发生了变化。
可选的，如图7所示，所述装置还可包括：第二确定模块205，用于确定所述目标视频片段对应的目标事件；设置模块206，用于为所述目标视频片段设置标识，所述标识用于表示所述目标事件的信息。
本发明实施例提供的装置，可以执行上述方法实施例，其实现原理和技术效果类似，本实施例此处不再赘述。
在本发明实施例中，通过比赛用球的位置关系参数可确定出目标视频图像，并形成待剪辑的目标视频片段，从而对目标视频片段进行剪辑。与现有技术相比，利用本发明实施例无需人工观看整个比赛的视频来确定待剪辑的片段，而是通过对采集的图像中比赛用球位置关系参数的确定即可确定出待剪辑的片段。因此，利用本发明实施例的方案，可提高视频剪辑的效率。
如图8所示，本发明实施例的视频处理设备，包括：处理器800，用于读取存储器820中的程序，执行下列过程：
采集视频图像；对于所述视频图像中的当前帧图像，获取比赛用球的位置关系参数；基于所述位置关系参数，在所述视频图像中确定目标视频图像；利用所述目标视频图像，获得待剪辑的目标视频片段。
收发机810，用于在处理器800的控制下接收和发送数据。
其中，在图8中，总线架构可以包括任意数量的互联的总线和桥，具体由处理器800代表的一个或多个处理器和存储器820代表的存储器的各种电路链接在一起。总线架构还可以将诸如外围设备、稳压器和功率管理电路等之类的各种其他电路链接在一起，这些都是本领域所公知的，因此，本文不再对其进行进一步描述。总线接口提供接口。收发机810可以是多个元件，即包括发送机和收发机，提供用于在传输介质上与各种其他装置通信的单元。处理器800负责管理总线架构和通常的处理，存储器820可以存储处理器800在执行操作时所使用的数据。
处理器800负责管理总线架构和通常的处理，存储器820可以存储处理器800在执行操作时所使用的数据。
处理器800还用于读取所述计算机程序，执行如下步骤:
在所述当前帧图像中，确定第一类型比赛用球的中心点的位置坐标；
根据所述位置坐标，获取所述位置关系参数，其中，所述位置关系参数包括：
所述当前帧图像中所述第一类型比赛用球的第一数量；
所述第一类型比赛用球的中心点的位置坐标中，最大的横坐标和最小的横坐标之差；
所述第一类型比赛用球的中心点的位置坐标中，最大的纵坐标和最小的纵坐标之差；
所述第一类型比赛用球中，目标比赛用球的第二数量，所述目标比赛用球为在所述第一类型比赛用球中横坐标最大的第一类型比赛用球。
处理器800还用于读取所述计算机程序，执行如下步骤:
在满足以下条件的情况下，在所述视频图像中确定目标视频图像：
所述第一数量等于第一预设值；
所述最大的横坐标和最小的横坐标之差为第二预设值；
所述最大的纵坐标和最小的纵坐标之差为第三预设值；
所述第二数量等于第四预设值。
处理器800还用于读取所述计算机程序，执行如下步骤:
利用所述当前帧图像作为起始帧图像；
根据所述当前帧图像，确定结束帧图像；
将所述起始帧图像、所述起始帧图像和所述结束帧图像之间的图像以及所述结束帧图像，作为所述目标视频图像。
处理器800还用于读取所述计算机程序，执行如下步骤:
从所述当前帧图像开始，对于采集时间在所述当前帧图像的采集时间之后的第一目标帧图像，将所述第一目标帧图像的前一帧图像和所述第一目标帧图像的再前一帧图像进行比对，获得第一比对结果，以及将所述第一目标帧图像和所述第一目标帧图像的前一帧图像进行比对，获得第二比对结果；
在所述第一比对结果表示任意一个或者多个比赛用球的位置发生了变化，且所述第二比对结果表示没有出现比赛用球的位置发生变化的现象情况下，将所述第一目标帧图像作为所述结束帧图像。
处理器800还用于读取所述计算机程序，执行如下步骤:
在所述当前帧图像中，确定第一类型比赛用球的中心点的第一位置坐标、第二类型比赛用球的中心点的第二位置坐标和第三类型比赛用球的中心点的第三位置坐标；
根据所述第一位置坐标、所述第二位置坐标和所述第三位置坐标，获取任意一个第三类型比赛用球的中心点到目标连线的距离；
其中，所述目标连线为所述第二类型比赛用球的中心点和任意一个所述第一类型比赛用球的中心点之间的连线。
处理器800还用于读取所述计算机程序，执行如下步骤:
在所述距离小于第五预设值的情况下，在所述视频图像中确定目标视频图像。
处理器800还用于读取所述计算机程序，执行如下步骤:
利用第二目标帧图像作为起始帧图像，其中，所述第二目标帧图像的采集时间在所述当前帧图像的采集时间之前；
从所述当前帧图像开始，对于采集时间在所述当前帧图像的采集时间之后的第三目标帧图像，将所述第三目标帧图像的前一帧和所述第三目标帧图像的再前一帧图像进行比对，获得第三比对结果，以及将所述第三目标帧图像和所述第三目标帧图像的前一帧图像进行比对，获得第四比对结果；
在所述第三比对结果表示任意一个或者多个比赛用球的位置发生了变化，且所述第四比对结果表示没有出现比赛用球的位置发生变化的现象的情况下，将所述第三目标帧图像作为结束帧图像；
将所述起始帧图像、所述起始帧图像和所述结束帧图像之间的图像以及所述结束帧图像，作为所述目标视频图像；
其中，所述第二目标帧图像具有以下特征：
所述第二目标帧图像的前一帧图像和所述第二目标帧图像的再前一帧图像相比，没有出现比赛用球的位置变化的现象；所述第二目标帧图像和所述第二目标帧图像的前一帧图像相比，任意一个或者多个比赛用球的位置发生了变化。
处理器800还用于读取所述计算机程序，执行如下步骤:
确定所述目标视频片段对应的目标事件；
为所述目标视频片段设置标识，所述标识用于表示所述目标事件的信息。
本发明实施例提供的设备，可以执行上述方法实施例，其实现原理和技术效果类似，本实施例此处不再赘述。
此外，本发明实施例的计算机可读存储介质，用于存储计算机程序，所述计算机程序可被处理器执行实现以下步骤：
采集视频图像；
对于所述视频图像中的当前帧图像，获取比赛用球的位置关系参数；
基于所述位置关系参数，在所述视频图像中确定目标视频图像；
利用所述目标视频图像，获得待剪辑的目标视频片段。
其中，所述获取比赛用球的位置关系参数，包括：
在所述当前帧图像中，确定第一类型比赛用球的中心点的位置坐标；
根据所述位置坐标，获取所述位置关系参数，其中，所述位置关系参数包括：
所述当前帧图像中所述第一类型比赛用球的第一数量；
所述第一类型比赛用球的中心点的位置坐标中，最大的横坐标和最小的横坐标之差；
所述第一类型比赛用球的中心点的位置坐标中，最大的纵坐标和最小的纵坐标之差；
所述第一类型比赛用球中，目标比赛用球的第二数量，所述目标比赛用球为在所述第一类型比赛用球中横坐标最大的第一类型比赛用球。
其中，所述基于所述位置关系参数，在所述视频图像中确定目标视频图像，包括：
在满足以下条件的情况下，在所述视频图像中确定目标视频图像：
所述第一数量等于第一预设值；
所述最大的横坐标和最小的横坐标之差为第二预设值；
所述最大的纵坐标和最小的纵坐标之差为第三预设值；
所述第二数量等于第四预设值。
其中，所述在所述视频图像中确定目标视频图像，包括：
利用所述当前帧图像作为起始帧图像；
根据所述当前帧图像，确定结束帧图像；
将所述起始帧图像、所述起始帧图像和所述结束帧图像之间的图像以及所述结束帧图像，作为所述目标视频图像。
其中，所述根据所述当前帧图像，确定结束帧图像，包括：
从所述当前帧图像开始，对于采集时间在所述当前帧图像的采集时间之后的第一目标帧图像，将所述第一目标帧图像的前一帧图像和所述第一目标帧图像的再前一帧图像进行比对，获得第一比对结果，以及将所述第一目标帧图像和所述第一目标帧图像的前一帧图像进行比对，获得第二比对结果；
在所述第一比对结果表示任意一个或者多个比赛用球的位置发生了变化，且所述第二比对结果表示没有出现比赛用球的位置发生变化的现象情况下，将所述第一目标帧图像作为所述结束帧图像。
其中，所述获取比赛用球的位置关系参数，包括：
在所述当前帧图像中，确定第一类型比赛用球的中心点的第一位置坐标、第二类型比赛用球的中心点的第二位置坐标和第三类型比赛用球的中心点的第三位置坐标；
根据所述第一位置坐标、所述第二位置坐标和所述第三位置坐标，获取任意一个第三类型比赛用球的中心点到目标连线的距离；
其中，所述目标连线为所述第二类型比赛用球的中心点和任意一个所述第一类型比赛用球的中心点之间的连线。
其中，所述基于所述位置关系参数，在所述视频图像中确定目标视频图像，包括：
在所述距离小于第五预设值的情况下，在所述视频图像中确定目标视频图像。
其中，所述在所述视频图像中确定目标视频图像，包括：
利用第二目标帧图像作为起始帧图像，其中，所述第二目标帧图像的采集时间在所述当前帧图像的采集时间之前；
从所述当前帧图像开始，对于采集时间在所述当前帧图像的采集时间之后的第三目标帧图像，将所述第三目标帧图像的前一帧和所述第三目标帧图像的再前一帧图像进行比对，获得第三比对结果，以及将所述第三目标帧图像和所述第三目标帧图像的前一帧图像进行比对，获得第四比对结果；
在所述第三比对结果表示任意一个或者多个比赛用球的位置发生了变化，且所述第四比对结果表示没有出现比赛用球的位置发生变化的现象的情况下，将所述第三目标帧图像作为结束帧图像；
将所述起始帧图像、所述起始帧图像和所述结束帧图像之间的图像以及所述结束帧图像，作为所述目标视频图像；
其中，所述第二目标帧图像具有以下特征：
所述第二目标帧图像的前一帧图像和所述第二目标帧图像的再前一帧图像相比，没有出现比赛用球的位置变化的现象；所述第二目标帧图像和所述第二目标帧图像的前一帧图像相比，任意一个或者多个比赛用球的位置发生了变化。
其中，所述方法还包括：
确定所述目标视频片段对应的目标事件；
为所述目标视频片段设置标识，所述标识用于表示所述目标事件的信息。
在本申请所提供的几个实施例中，应该理解到，所揭露方法和装置，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理包括，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元，可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述收发方法的部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random Access Memory，简称RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明所述原理的前提下，还可以作出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (11)

1.一种视频处理方法，其特征在于，包括：
采集视频图像；
对于所述视频图像中的当前帧图像，获取比赛用球的位置关系参数；
基于所述位置关系参数，在所述视频图像中确定目标视频图像；
利用所述目标视频图像，获得待剪辑的目标视频片段；
其中，所述位置关系参数包括：
比赛用球在所述当前帧图像中的位置、比赛用球之间的位置关系、所述当前帧图像中一种或多种类型的比赛用球的数量。
2.根据权利要求1所述的方法，其特征在于，所述获取比赛用球的位置关系参数，包括：
在所述当前帧图像中，确定第一类型比赛用球的中心点的位置坐标；
根据所述位置坐标，获取所述位置关系参数，其中，所述位置关系参数包括：
所述当前帧图像中所述第一类型比赛用球的第一数量；
所述第一类型比赛用球的中心点的位置坐标中，最大的横坐标和最小的横坐标之差；
所述第一类型比赛用球的中心点的位置坐标中，最大的纵坐标和最小的纵坐标之差；
所述第一类型比赛用球中，目标比赛用球的第二数量，所述目标比赛用球为在所述第一类型比赛用球中横坐标最大的第一类型比赛用球。
3.根据权利要求2所述的方法，其特征在于，所述基于所述位置关系参数，在所述视频图像中确定目标视频图像，包括：
在满足以下条件的情况下，在所述视频图像中确定目标视频图像：
所述第一数量等于第一预设值；
所述最大的横坐标和最小的横坐标之差为第二预设值；
所述最大的纵坐标和最小的纵坐标之差为第三预设值；
所述第二数量等于第四预设值。
4.根据权利要求1-3任意一项所述的方法，其特征在于，所述在所述视频图像中确定目标视频图像，包括：
利用所述当前帧图像作为起始帧图像；
根据所述当前帧图像，确定结束帧图像；
将所述起始帧图像、所述起始帧图像和所述结束帧图像之间的图像以及所述结束帧图像，作为所述目标视频图像。
5.根据权利要求4所述的方法，其特征在于，所述根据所述当前帧图像，确定结束帧图像，包括：
从所述当前帧图像开始，对于采集时间在所述当前帧图像的采集时间之后的第一目标帧图像，将所述第一目标帧图像的前一帧图像和所述第一目标帧图像的再前一帧图像进行比对，获得第一比对结果，以及将所述第一目标帧图像和所述第一目标帧图像的前一帧图像进行比对，获得第二比对结果；
在所述第一比对结果表示任意一个或者多个比赛用球的位置发生了变化，且所述第二比对结果表示没有出现比赛用球的位置发生变化的现象情况下，将所述第一目标帧图像作为所述结束帧图像。
6.根据权利要求1所述的方法，其特征在于，所述获取比赛用球的位置关系参数，包括：
在所述当前帧图像中，确定第一类型比赛用球的中心点的第一位置坐标、第二类型比赛用球的中心点的第二位置坐标和第三类型比赛用球的中心点的第三位置坐标；
根据所述第一位置坐标、所述第二位置坐标和所述第三位置坐标，获取任意一个第三类型比赛用球的中心点到目标连线的距离；
其中，所述目标连线为所述第二类型比赛用球的中心点和任意一个所述第一类型比赛用球的中心点之间的连线。
7.根据权利要求6所述的方法，其特征在于，所述基于所述位置关系参数，在所述视频图像中确定目标视频图像，包括：
在所述距离小于第五预设值的情况下，在所述视频图像中确定目标视频图像。
8.根据权利要求1或6或7所述的方法，其特征在于，所述在所述视频图像中确定目标视频图像，包括：
利用第二目标帧图像作为起始帧图像，其中，所述第二目标帧图像的采集时间在所述当前帧图像的采集时间之前；
从所述当前帧图像开始，对于采集时间在所述当前帧图像的采集时间之后的第三目标帧图像，将所述第三目标帧图像的前一帧和所述第三目标帧图像的再前一帧图像进行比对，获得第三比对结果，以及将所述第三目标帧图像和所述第三目标帧图像的前一帧图像进行比对，获得第四比对结果；
在所述第三比对结果表示任意一个或者多个比赛用球的位置发生了变化，且所述第四比对结果表示没有出现比赛用球的位置发生变化的现象的情况下，将所述第三目标帧图像作为结束帧图像；
将所述起始帧图像、所述起始帧图像和所述结束帧图像之间的图像以及所述结束帧图像，作为所述目标视频图像；
其中，所述第二目标帧图像具有以下特征：
所述第二目标帧图像的前一帧图像和所述第二目标帧图像的再前一帧图像相比，没有出现比赛用球的位置变化的现象；所述第二目标帧图像和所述第二目标帧图像的前一帧图像相比，任意一个或者多个比赛用球的位置发生了变化。
9.根据权利要求1所述的方法，其特征在于，所述方法还包括：
确定所述目标视频片段对应的目标事件；
为所述目标视频片段设置标识，所述标识用于表示所述目标事件的信息。
10.一种视频处理设备，包括：收发机、存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序；其特征在于，所述处理器，用于读取存储器中的程序实现如权利要求1至9中任一项所述的方法中的步骤。
11.一种计算机可读存储介质，用于存储计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至9中任一项所述的方法中的步骤。
CN201910757251.7A 2019-08-16 2019-08-16 一种视频处理方法、设备及计算机可读存储介质 Active CN112399096B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910757251.7A CN112399096B (zh) 2019-08-16 2019-08-16 一种视频处理方法、设备及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910757251.7A CN112399096B (zh) 2019-08-16 2019-08-16 一种视频处理方法、设备及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN112399096A CN112399096A (zh) 2021-02-23
CN112399096B true CN112399096B (zh) 2023-06-23

Family

ID=74602767

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910757251.7A Active CN112399096B (zh) 2019-08-16 2019-08-16 一种视频处理方法、设备及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN112399096B (zh)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8682654B2 (en) * 2006-04-25 2014-03-25 Cyberlink Corp. Systems and methods for classifying sports video
US10129608B2 (en) * 2015-02-24 2018-11-13 Zepp Labs, Inc. Detect sports video highlights based on voice recognition
CN107147920B (zh) * 2017-06-08 2019-04-12 简极科技有限公司 一种多源视频剪辑播放方法及系统

Also Published As

Publication number Publication date
CN112399096A (zh) 2021-02-23

Similar Documents

Publication Publication Date Title
AU2016233893B2 (en) Detecting segments of a video program
CN110971929B (zh) 云游戏视频处理方法、电子设备及存储介质
US9699380B2 (en) Fusion of panoramic background images using color and depth data
US20180182114A1 (en) Generation apparatus of virtual viewpoint image, generation method, and storage medium
CN111325798B (zh) 相机模型纠正方法、装置、ar实现设备及可读存储介质
US10769811B2 (en) Space coordinate converting server and method thereof
CN108074241B (zh) 目标图像的质量评分方法、装置、终端及存储介质
US11076140B2 (en) Information processing apparatus and method of controlling the same
CN112163993A (zh) 图像处理方法、装置、设备及存储介质
CN115396705A (zh) 投屏操作验证方法、平台及系统
CN108421240A (zh) 基于ar的球场弹幕系统
US20200167933A1 (en) Image processing apparatus, image processing method, and a non-transitory computer readable storage medium
CN110769225B (zh) 基于幕布的投影区域获取方法及投影装置
CN114095722A (zh) 清晰度的确定方法、装置及设备
CN110009407A (zh) 一种广告推送方法、装置、广告播放终端及存储介质
CN107733874B (zh) 信息处理方法、装置、计算机设备和存储介质
CN113205011A (zh) 图像掩膜确定方法及装置、存储介质和电子设备
CN112399096B (zh) 一种视频处理方法、设备及计算机可读存储介质
CN110430424B (zh) Fov的测试方法、装置、存储介质及电子设备
CN109842791B (zh) 一种图像处理方法及装置
CN107767350B (zh) 视频图像还原方法及装置
CN110213626B (zh) 视频处理方法及终端设备
US10282633B2 (en) Cross-asset media analysis and processing
CN114745537A (zh) 音画延迟测试方法、装置、电子设备和存储介质
CN113191210B (zh) 一种图像处理方法、装置及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant