CN102890781A - 一种针对羽毛球比赛视频的精彩镜头识别方法 - Google Patents

一种针对羽毛球比赛视频的精彩镜头识别方法 Download PDF

Info

Publication number
CN102890781A
CN102890781A CN2012102301076A CN201210230107A CN102890781A CN 102890781 A CN102890781 A CN 102890781A CN 2012102301076 A CN2012102301076 A CN 2012102301076A CN 201210230107 A CN201210230107 A CN 201210230107A CN 102890781 A CN102890781 A CN 102890781A
Authority
CN
China
Prior art keywords
camera lens
frame
video
sportsman
athletic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012102301076A
Other languages
English (en)
Other versions
CN102890781B (zh
Inventor
李炜
李进
齐翔
钟沛珉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Yihang Yuanzhi Technology Co Ltd
Original Assignee
Beihang University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beihang University filed Critical Beihang University
Priority to CN201210230107.6A priority Critical patent/CN102890781B/zh
Publication of CN102890781A publication Critical patent/CN102890781A/zh
Application granted granted Critical
Publication of CN102890781B publication Critical patent/CN102890781B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)

Abstract

本发明涉及一种针对羽毛球比赛视频中精彩镜头识别的方法,在找出羽毛球比赛视频中所有的全场比赛镜头的前提下,进行羽毛球比赛视频的高级语义分析。在高级语义分析阶段,进行运动员的检测与跟踪,并分析运动员的动作、运动量以及每个回合的比赛时间;在此基础上,判断镜头的精彩度,即以下四个因素的加权平均值:运动量、由运动员轮廓识别的救球次数、由运动员轮廓识别的扣球次数、由角点运动轨迹识别的扣球次数,并选出精彩度最大的几个镜头作为最精彩镜头。

Description

一种针对羽毛球比赛视频的精彩镜头识别方法
技术领域
本发明涉及一种针对羽毛球比赛视频的精彩镜头识别方法,属于计算机视觉技术领域。
背景技术
随着网络技术的发展和光学采集设备的普及,视频的数据量快速增长,如何在视频中比较快的找到感兴趣的内容是一个十分有意义的研究问题。体育比赛视频具有自身的特点,场景变化比较规律,有利于进行分析,所以体育比赛视频分析是视频分析中的热门研究方向。羽毛球是我国的传统优势项目,有着广大的观影人群。现在的羽毛球比赛视频非常之多,如果能将羽毛球比赛视频中最精彩的部分寻找出来,并提供给观众,无疑会提高人们观看羽毛球比赛的便利程度。
现有的羽毛球比赛视频中高级语义分析(包含精彩镜头识别)的方法主要有:
1)基于运动目标检测的方法。首先检测到比赛视频中的运动目标,进而分析运动目标的动作、运动方向等,从而找出比赛中的精彩部分。在运动目标的动作分析等方面,现在还没有很理想的动作分析方法,准确率不够高,且计算复杂度大。
2)基于慢镜头检测的方法。在体育比赛当中,精彩的镜头往往会用慢速播放方式从不同视角重复播放几次。因此,重放场景的检测对于精彩镜头具有重要的提示作用,并且慢镜头和正常的比赛视频之间存在编辑特效,如渐变、徽标等。
3)多模态融合的方法。基于单模态特征的方法只利用了视觉、听觉或者文本三者之一的信息来判断和处理视频,没有充分利用其他信息。多模态信息本质上是由文本、音频、视频等多种模态组合而成,综合运用多模态特征才能完整表示多媒体所蕴含的语义信息。采用多模态分析方法的关键是要找出模态之间的相互联系。
现有的方法存在一些不足:现有的方法一般都是针对所有的视频,而专门针对羽毛球比赛视频的算法很少。羽毛球比赛视频场景变化比较有规律,运动员的人数也比较固定,能结合羽毛球比赛专业知识的分析方法很少。
发明内容
本发明的目的是提供一种识别羽毛球比赛视频中精彩镜头的方法,该方法在找出羽毛球比赛视频中所有的全场比赛镜头的前提下,进行羽毛球比赛视频的高级语义分析;在高级语义分析阶段,进行运动员的检测与跟踪,并分析运动员的动作、运动量以及每个回合的比赛时间;在此基础上通过综合分析,定义了镜头的精彩度,即以下四个因素的加权平均值:运动量、由运动员轮廓识别的救球次数、由运动员轮廓识别的扣球次数、由角点运动轨迹识别的扣球次数;精彩度的值越大,表明镜头越精彩;最后选出精彩度最大的几个镜头作为最精彩镜头;
为实现上述目的,本发明采用下述的技术方案,其特征在于包括以下步骤:
步骤一,运动员检测与识别:对原始羽毛球比赛视频进行处理,找到其中所有的全场比赛镜头,并进行运动员的检测与跟踪,提取运动员的轮廓;
步骤二,运动员轮廓分析:将步骤一提取的运动员轮廓用外切矩形框标出,通过判断所述矩形框对角线的斜率来识别可能的运动员扣球镜头与救球镜头,斜率大于一定的阈值判定为扣球镜头,斜率小于一定的阈值判定为救球镜头;
步骤三,运动员光流场分析:识别步骤一中获得的羽毛球比赛视频中全场比赛镜头视频帧的角点,对所述角点进行追踪,角点的运动轨迹形成一个光流场;
步骤四,光流场聚类分析:将步骤三中得到的光流场用线段标出,作为运动员的运动轨迹,将这些运动轨迹进行聚类,并计算每一类运动轨迹的平均斜率,若斜率大于一定的阈值,则认为对应视频帧中可能存在精彩的扣球镜头;
步骤五,比赛镜头的时间长度分析:利用镜头场景的变化来判断比赛回合,通过每一回合的视频帧数和帧率得出每个回合的时间;
步骤六,运动员运动量分析:计算步骤二中所述矩形框的中心点,由中心点的运动轨迹获得相邻几帧中运动员的位移量,作为相应的运动量;
步骤七,精彩镜头判断:利用一个镜头的四个特征来表示该镜头的精彩度,所述四个特征分别是:镜头的运动量d1、镜头救球的次数d2、镜头内由运动员轮廓识别的扣球次数d3、镜头内由角点识别的运动员的扣球次数d4,采用公式(1)对镜头的运动量d1进行归一化:
M=d1/frameWidth*10                         (1)
其中,M表示归一化后的运动量,frameWidth表示视频帧的宽度;
利用公式(2)计算镜头的精彩度:
C=σ1M+σ2d23d34d4                  (2)
其中,C表示镜头精彩度,σ1234表示相应的加权系数,其和为1,根据所得到的镜头精彩度C确定比赛的精彩镜头。
本发明所提供的识别羽毛球比赛视频中精彩镜头的方法找出了羽毛球比赛视频中的精彩镜头;有关的测试结果表明,本方法找出的镜头大多是争夺比较激烈,扣球救球次数较多的镜头。
附图说明
图1运动员轮廓的提取示意图。
图2提取的运动员矩形轮廓图。
图3精彩的救球镜头。
图4全场镜头中的角点示意图。
图5全场比赛镜头。
图6运动员运动轨迹图。
图7角点分类示意图。
图8由角点运动轨迹的斜率来识别扣球镜头。
图9识别的扣球镜头。
图10运动员的运动轨迹示意图。
图11精彩镜头识别步骤示意图
具体实施方式
前已述及,本发明在找出羽毛球比赛视频中所有的全场比赛镜头的前提下,进行羽毛球比赛视频的高级语义分析。在高级语义分析阶段,进行运动员的检测与跟踪,并分析运动员的动作、运动量以及每个回合的比赛时间;在此基础上,定义了镜头的精彩度,即以下四个因素的加权平均值:运动量、由运动员轮廓识别的救球次数、由运动员轮廓识别的扣球次数、由角点运动轨迹识别的扣球次数。精彩度的值越大,表明镜头越精彩。最后选出精彩度最大的几个镜头作为最精彩镜头。
下面说明本发明的实现方式。需要注意的是,以下仅是示例性的列举了本发明的一种实施方式:
步骤一:运动员的检测与识别。
在全局比赛场景中,场地的位置一般是固定不动的,只有运动员在场地运动。为此,若能从镜头中分割出运动员来,对视频的精彩镜头分析是有帮助的。在全局场景中,将运动员看做前景,其他都看作背景。若能将前景分离出来,便识别出了运动员。本发明采用背景减除法提取前景,就是用一帧减去前一帧(也可能是后几帧),然后将足够大的差别标为前景。这种方法常常能够捕捉到运动目标的边缘。由于像素值总会受到噪声和波动的影响,应该忽略很小的差异,标识较大的差别。本发明采用背景减除方法,通过两帧之间做差,然后将差值进行二值化,最后进行中值滤波,以消除小的噪声,最后分别出运动员目标,识别出的运动员轮廓如图1所示:
如果将运动员的轮廓用矩形框标出,结果如图2所示:
由运动员的矩形轮廓图得到启发,如果能算出轮廓的长宽比,往往能得到一些精彩事件,例如图3所示,当长宽比大于一定数值时,往往是精彩的救球镜头。检测中设定一个阈值,不同的视频此参数可以调节,阈值在1.5与3.0之间。
下面根据长宽比识别救球镜头。首先需要识别矩形框的个数,一般情况下,羽毛球比赛为单打或者双打,由此识别的矩形框的个数为2或者4。但是由于噪声的干扰,摄像机的运动,有时候矩形框框起来的目标不一定是运动员。所以只有当矩形框的个数为2或者4时,此时一般来说是运动员比赛的情形。识别出比赛镜头后,设定长宽比的阈值,实际应用的情形中设定宽度比长度的区间为1.7到3.0,由此识别精彩的救球镜头。
对于视频中的扣球镜头,运动员方框的轮廓也可辅助分析。当矩形框的个数为2或者4(单打或者双打)时,此时一般来说识别出了所有的运动员。通过设定长宽比的阈值来判断扣球镜头。在识别这类精彩的扣球镜头时,设定长度比宽度的区间为2.4到4.0,由此来识别可能的扣球镜头。
步骤二:运动员的检测与识别。
在处理羽毛球比赛视频时,视频中运动的运动员是关注的对象。如果能对运动员进行跟踪,则能够识别出运动员的运动规律。经典的跟踪运动物体的方法是跟踪视觉上重要的关键点,而不是整个物体。有很多的局部特征可以进行运动员的跟踪。很明显,如果上一帧是从一面很大的空白白色墙壁上选择一个点,那么很难从视频的下一帧中再次寻找到这个点。因为对于干净的空白墙壁上的点来说,这些点都是一样的或者相似的,不容易从随后的视频中跟踪到这个点。相反,如果选择的点具有独一无二的特征,从视频的下一帧中再找到这个点的概率就非常之大。因此,角点就是这样的一类点,它的特征是独一无二的,或者至少接近独一无二,并且可以与另一张图像上的点进行参数化的比较[1]。
如果一个点在两个正教的方向上都有明显的导数,则这点是更倾向于独一无二的。直观上讲,角点(非边缘)是一类含有足够信息且能从当前帧和下一帧中都能提取出来的点。最普遍使用的角点定义是由Harris提出的,定义的基础是图像灰度强度的二阶导数矩阵。考虑到图像所有的像素点,图像的二阶导数即形成一幅新的“二阶导数图像”,或者融合在一起形成一幅新的Hessian图像。这个术语源自于一个点的如公式(3)定义的二维Hessian矩阵:
H ( p ) = ∂ 2 I ∂ x 2 ∂ 2 I ∂ x ∂ y ∂ 2 I ∂ x ∂ y ∂ 2 I ∂ y 2 - - - ( 3 )
对于Harris角点,使用每点周围小窗口的二阶导数图像的自相关矩阵。这个自相关矩阵的定义如公式(4)所示:
M ( x , y ) = Σ - K ≤ i , j ≤ K W i , j I x 2 ( x + i , y + j ) Σ - K ≤ i , j ≤ K W i , j I x ( x + i , y + j ) I y ( x + i , y + j ) Σ - K ≤ i , j ≤ K W i , j I x ( x + i , y + j ) I y ( x + i , y + j ) Σ - K ≤ i , j ≤ K W i , j I y 2 ( x + i , y + j ) - - - ( 4 )
这里Wi,j是归一化的权重比例,但是通常被用作产生圆形窗口或高斯权重。Harris定义的角点位于图像二阶导数的自相关矩阵有两个最大特征值的地方,这在本质上表示以选择的角点为中心,周围存在至少两个不同方向的纹理(或者边缘),正如实际上来说,角点是由至少两个边缘相交于一点而产生。角点的这个定义还有另外一个优点。被跟踪的物体在移动过程中可能会旋转,找到同时对移动和旋转不变的量是非常重要的。只考虑自相关矩阵的特征值便能够达到这个目的。这两个最大特征值不仅可以判定一个点是否是一个好的可跟踪的特征点,同时也提供了对这个点进行识别的一个标识。
如图4所示,对羽毛球比赛视频帧提取角点,将角点用黑色符号标出。图中的角点代表了这幅图像的特征信息,而这些角点在下一帧中是容易跟踪到的。
光流是指当物体从视频场景中移动或者摄像机位移时图像中产生的相应移动变化的形式。这些变化被认为是图像中的每一个像素点有一个特定的速度矢量,这些矢量就形成了图像的光流场。如果图像中的每个像素都与速度关联,这样得到的就是稠密光流。稠密光流的方法需要使用某种插值方法在比较容易跟踪的像素之间进行插值以解决那些运动不明确的像素,所以稠密光流需要相当大的计算量。稀疏光流可以解决这个问题。稀疏光流的计算需要在被跟踪之前指定一组点,如果这些点是角点,那么跟踪就会相对稳定和可靠。在羽毛球比赛视频中,如果能够找到一帧中的角点,而后就可以采用稀疏光流在随后的视频帧中进行跟踪。
Lucas-Kanade(LK)算法是经典的稀疏光流跟踪算法。这种方法与图像金字塔一起,可以跟踪更快的运动。LK算法只需要每个感兴趣点周围小窗口的局部信息,所以它可以应用于稀疏内容。但是,使用小窗口的LK算法存在不足之处,较大的运动会将点移出这个小窗口,从而造成算法无法再找到这些点。金字塔的LK算法可以解决这个问题,即从图像金字塔的最高层(细节最少)开始向金字塔的低层(丰富的细节)进行跟踪。跟踪图像金字塔允许小窗口捕获较大的运动。
对于全局场景的画面,由于场地和其他物体一般来说是不动的,只有运动员在运动。由此,运用Lucas-Kanade光流法追踪运动的物体既可以得到运动员的运动轨迹。图5表示一段视频的前一帧,图6表示这段视频的相邻的后一帧。在后一帧追踪到的运动员的运动轨迹如图7中的黑色线条所示:
在全局场景中,将位置变化的角点单独找出后发现,这些角点在图中分别属于两个运动员(单打)或者四个运动员(双打),因此,很容易将这些角点聚为两类(单打比赛)或者四类(双打比赛),如图7所示。
本发明采用采用K均值聚类算法对提取的变化的角点进行聚类。具体算法如下:
输入:一帧图像中追寻到的所有角点。
输出:两个聚类中的角点。
1.设定要聚类的个数:2(单打比赛)或者4(双打比赛)。
2.将两帧中追踪到的运动的角点按坐标值进行聚类。
3.设定最大迭代次数为50。
4.首先任意选取亮点作为聚类中心点。
5.计算其他点和聚类中心点之间的距离,距离最近的归为一类。
6.计算各类中包含的点的平均距离。然后重复第五步,直到聚类中心不变或者达到最大迭代次数50次为止。
通过对提取的运动轨迹图发现,在图8中,位于下部的运动轨迹线聚类中,这些轨迹的算术平均斜率很大,而图8正是比较精彩的扣球镜头。由此得到启发,通过对所有追踪的运动的角点进行聚类后,算出每一类的运动轨迹的平均斜率,计算公式如公式(5)所示,即可设定一定的阈值进行扣球镜头的判定。在公式(5)中,xi代表同一个聚类中每一条运动轨迹的斜线的斜率,代表平均斜率。
X ‾ = 1 n Σ i = 1 n x i - - - ( 5 )
本发明以2008年北京奥运会羽毛球比赛男单——鲍春来VS凯文(视频1)和2008年奥运会男单——林丹VS李宗伟(视频2)为分析素材,图9是本算法识别的一些精彩的扣球镜头的例子。
因为相邻的视频帧之间的变化很小,运动轨迹路线很短,运动的方向不容易进行判别。所以每隔几帧取一帧追踪运动的角点并判断运动的方向,这样从总体上把握运动的方向。通过设置比较小的斜率阈值,能够获得对于扣球镜头较高的查全率,但与之相对的是识别出来的镜头的查准率比较低。通过和运动员运动轮廓扣球镜头相结合,当角点识别判断出为扣球镜头的时候,如果通过运动员的轮廓识别判断这也是扣球镜头,则把所判定的视频帧作为精彩的扣球镜头。在具体实现时,运动员轮廓识别的长比宽的阈值设定为2.7-4之间(分别为阈值下限和阈值上限),角点识别的斜率的阈值设定为2.2(当判断出来的斜率的平均值大于2.2时,认为角点识别出了扣球镜头)。
步骤三:比赛回合的时间长度分析
对于羽毛球比赛来说,一个球是指某个运动员赢得一局中的一分。在一个全局比赛场景中,当场景由全局场景切换为其他场景时,往往意味着一个球的结束。而一个球持续的时间越长,意味着这一个球可能更精彩,因为运动员争夺这一分的时间比较长。由此得到的思想就是计算每一个全局镜头的时间长度,取时间长度相对较长的镜头作为精彩镜头。另外,时间较短的镜头也可能是精彩镜头。比如:发球后对方直接扣球得分。在时间较短的镜头中,有一些全景镜头不是拍摄的比赛,而是运动员在两球之间的间隙休息或者走动的场景。对于精彩镜头的识别需要排除这些干扰镜头。这些干扰镜头的时间都比较短。一种有效的排除这种干扰镜头的方法就是根据运动量进行判断。一般来说,当运动员比赛过程中,运动员处于不断运动的状态,相邻帧之间运动员的位置有明显的变化。而干扰镜头中,运动员处于静止或者运动比较缓慢的情况。
根据一个全场镜头的持续时间,将时间作为镜头的一个特征。镜头的时间特征采用公式(6)进行计算:
T=Fend-Fstart                        (6)
公式(5)中,Fend代表结束帧的编号,Fstart代表开始帧的编号,T代表时间长度(用一个镜头中帧的数量来表示)。由此得到所有镜头的时间长度,并作为镜头的一个特征写入到镜头相应的特征数组里面。按照镜头的时间长度进行排序,本发明选择的是堆排序,取前10段时间最长的镜头和后10段时间最短的镜头输出(不足10段镜头按实际镜头数取得)。在获取时间最短的镜头过程中,排除运动量小于1的干扰镜头情况。在时间比较长的镜头中,一般表现为双方的争夺比较激烈。在时间较短的镜头中,常常能够见到非常快的扣球镜头。
步骤四:运动员的运动量分析
运动员的运动量表示相邻帧中运动员移动的位移的大小。在比赛的过程中,当运动员的运动量比较大时,运动员通常跑动的比较多,往往意味着比赛双方在进行着激烈的较量。由此得到的思想就是计算运动员的运动量,运动量最大的镜头作为精彩镜头。算法步骤如下:
输入:所有的全场比赛镜头。
输出:运动量最大的几个镜头。
1.进行运动员检测,识别运动员所处的位置。识别出的每个运动物体用矩形框标出。当矩形框的个数为2(单打比赛)或者4(双打比赛)时,意味着此时一般是识别到了所有的运动员。
2.由于摄像机的拍摄角度一般来说是位于一方球员的后面,所以单打比赛的两个矩形框通常位于图像的上半部分和下半部分,而双打比赛的矩形框各有两个位于图像的上半部分和下半部分。如图10所示。计算出两个矩形框的中心点坐标,设中心点的坐标为(X,Y),则计算公式如公式(7)所示:
X=X0+1/2*width
Y=Y0+1/2*height                      (7)
公式(7)中,X0代表了矩形框左上顶点的X方向的坐标,Yo代表了矩形框左上顶点Y方向的坐标,width代表矩形框的宽度,height代表矩形框的高度。
3.分别计算矩形框的中心,即每个矩形框的对角线的交点的坐标(x,y)。根据坐标Y方向值的大小判断出矩形框是位于图像的上半部分还是下半部分。
4.如果是有两个矩形框,则每隔三帧计算位于图像上部的矩形框对角线的交点移动的距离d1,位于图像下部的矩形框对角线的交点移动的距离d2,然后将d1和d2取平均值d。
5.计算一个镜头中运动量d的平均值。如果是有四个矩形框,对于图像的上半部分来说,由于两个运动员的运动,所以在图像的上半部分两帧一共会有四个矩形框。计算下一帧的第一个矩形框相对于上一帧的两个矩形框的距离d1,d2,计算下一帧的第二个矩形框相对于上一帧的两个矩形框的距离d3,d4;对于图像的下半部分来说,同样的算法计算出d5,d6,d7,d8。将d1,d2,d3,……d8相加,然后除以8,作为平均移动距离d。
6.将镜头的运动量特征保存到镜头特征之中。将所有的运动量进行排序,选出运动量最大的10个镜头(如果不足10个镜头按实际镜头数取得)输出,作为运动量最大的精彩镜头。
步骤五:精彩镜头的判断
本专利选择一个镜头的四个特征来代表这个镜头进行综合判断,这四个特征分别是:镜头的运动量、镜头救球的次数、镜头内由运动员轮廓识别的扣球次数、镜头内由角点识别的运动员的扣球次数。上述四个因素分别记为d1,d2,d3,d4。其中,运动量d1是由像素点的距离来表示的,将其归一化为0-10的区间。归一化采用公式(8):
M=Di,j/frameWidth*10                             (8)
在公式(8)中,M表示归一化后的运动量,Di,j表示相隔一定距离的帧之间以像素距离表示的运动量,frameWidth表示视频帧的宽度,因为要归一化为0-10的区间,所以在公式的最后要乘以10。
在识别救球和扣球的镜头过程中,如果是在同一个镜头内,每识别到一次救球或者扣球的动作就将相应的次数加一,最后作为两个因素加入到镜头的特征之中。定义镜头精彩度:
C=σ1M+σ2d23d34d4                  (9)
其中,C表示镜头精彩度,M表示归一化后的镜头运动量,d2表示一个镜头内的救球次数,d3表示一个镜头内由运动员轮廓识别的镜头的扣球次数,d4表示一个镜头内由角点识别的运动员的扣球次数。σ1234表示相应的加权系数,其和为1。公式的意义就是将镜头的四个特征进行加权平均,最后得到镜头的精彩度C。C值越大的镜头越精彩。

Claims (5)

1.一种针对羽毛球比赛视频中精彩镜头识别的方法:
步骤一,运动员检测与识别:对原始羽毛球比赛视频进行处理,找到其中所有的全场比赛镜头,并进行运动员的检测与跟踪,提取运动员的轮廓;
步骤二,运动员轮廓分析:将步骤一提取的运动员轮廓用外切矩形框标出,通过判断所述矩形框对角线的斜率来识别可能的运动员扣球镜头与救球镜头,斜率大于一定的阈值判定为扣球镜头,斜率小于一定的阈值判定为救球镜头;
步骤三,运动员光流场分析:识别步骤一中获得的羽毛球比赛视频中全场比赛镜头视频帧的角点,对所述角点进行追踪,角点的运动轨迹形成一个光流场;
步骤四,光流场聚类分析:将步骤三中得到的光流场用线段标出,作为运动员的运动轨迹,将这些运动轨迹进行聚类,并计算每一类运动轨迹的平均斜率,若斜率大于一定的阈值,则认为对应视频帧中可能存在精彩的扣球镜头;
步骤五,比赛镜头的时间长度分析:利用镜头场景的变化来判断比赛回合,通过每一回合的视频帧数和帧率得出每个回合的时间;
步骤六,运动员运动量分析:计算步骤二中所述矩形框的中心点,由中心点的运动轨迹获得相邻几帧中运动员的位移量,作为相应的运动量;
步骤七,精彩镜头判断:利用一个镜头的四个特征来表示该镜头的精彩度,所述四个特征分别是:镜头的运动量d1、镜头救球的次数d2、镜头内由运动员轮廓识别的扣球次数d3、镜头内由角点识别的运动员的扣球次数d4,采用公式(1)对镜头的运动量d1进行归一化:
M=d1/frameWidth*10                   (1)
其中,M表示归一化后的运动量,frameWidth表示视频帧的宽度;
利用公式(2)计算镜头的精彩度:
C=σ1M+σ2d23d34d4            (2)
其中,C表示镜头精彩度,σ1234表示相应的加权系数,其和为1;
最终根据所得到的镜头精彩度C确定比赛的精彩镜头。
2.如权利要求1所述的方法,其特征在于:所述步骤一中采用帧主颜色提取方法得到所有的全场比赛镜头。
3.如权利要求1所述的方法,其特征在于:所述步骤三中采用Lucas-Kanade算法追踪识别到的角点的光流场。
4.如权利要求1所述的方法,其特征在于:所述步骤七镜头的救球次数是指在同一个回合中识别到的总次数,镜头的扣球次数是指在同一个回合中识别到的总次数。
5.如权利要求1所述的方法,其特征在于:所述步骤七中的加权系数σ1234由用户根据需要确定。
CN201210230107.6A 2012-07-04 2012-07-04 一种针对羽毛球比赛视频的精彩镜头识别方法 Active CN102890781B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210230107.6A CN102890781B (zh) 2012-07-04 2012-07-04 一种针对羽毛球比赛视频的精彩镜头识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210230107.6A CN102890781B (zh) 2012-07-04 2012-07-04 一种针对羽毛球比赛视频的精彩镜头识别方法

Publications (2)

Publication Number Publication Date
CN102890781A true CN102890781A (zh) 2013-01-23
CN102890781B CN102890781B (zh) 2016-01-13

Family

ID=47534280

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210230107.6A Active CN102890781B (zh) 2012-07-04 2012-07-04 一种针对羽毛球比赛视频的精彩镜头识别方法

Country Status (1)

Country Link
CN (1) CN102890781B (zh)

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103888842A (zh) * 2014-04-17 2014-06-25 江苏银河电子股份有限公司 基于智能机顶盒的有线电视视频画面信息数据的获取方法
CN105959804A (zh) * 2016-04-28 2016-09-21 乐视控股(北京)有限公司 智能播放方法及装置
CN106075869A (zh) * 2016-08-10 2016-11-09 张阳 跑动量在网球比赛中的统计方法及系统
CN107071270A (zh) * 2016-02-10 2017-08-18 奥林巴斯株式会社 摄像装置及其摄像方法
CN107168934A (zh) * 2017-05-15 2017-09-15 掌阅科技股份有限公司 电子书情节提示方法、电子设备及计算机存储介质
CN107224714A (zh) * 2017-06-20 2017-10-03 安徽禹缤体育科技有限公司 一种羽毛球比赛数据记录管理系统
CN107341821A (zh) * 2017-06-20 2017-11-10 安徽禹缤体育科技有限公司 一种基于羽毛球场馆摄像机的运动量展示系统
CN107349593A (zh) * 2017-06-20 2017-11-17 安徽禹缤体育科技有限公司 一种提高观众观看兴趣的选手个人数据统计及展示方法
WO2018027691A1 (zh) * 2016-08-10 2018-02-15 张阳 跑动量在网球比赛中的统计方法及系统
CN108229282A (zh) * 2017-05-05 2018-06-29 商汤集团有限公司 关键点检测方法、装置、存储介质及电子设备
CN109344697A (zh) * 2018-08-16 2019-02-15 中国科学院信息工程研究所 一种对抗性竞赛中的精彩时刻识别方法
CN109977735A (zh) * 2017-12-28 2019-07-05 优酷网络技术(北京)有限公司 运动精彩片段的提取方法及装置
CN111291617A (zh) * 2020-01-13 2020-06-16 西北农林科技大学 基于机器学习的羽毛球赛事视频精彩片段提取方法
CN112957712A (zh) * 2021-02-05 2021-06-15 北京深蓝长盛科技有限公司 排球运动中主攻队员扣球数据的统计方法和装置及设备
CN113052033A (zh) * 2021-03-15 2021-06-29 深圳软牛科技有限公司 视频精彩度测量方法、装置、设备及存储介质
US11080532B2 (en) 2019-01-16 2021-08-03 Mediatek Inc. Highlight processing method using human pose based triggering scheme and associated system
CN113361643A (zh) * 2021-07-02 2021-09-07 人民中科(济南)智能技术有限公司 基于深度学习的通用标志识别方法、系统、设备及存储介质
WO2021174391A1 (zh) * 2020-03-02 2021-09-10 深圳市大疆创新科技有限公司 比赛画面的获取方法和装置及拍摄装置的控制方法和装置
US11295084B2 (en) 2019-09-16 2022-04-05 International Business Machines Corporation Cognitively generating information from videos
CN114485637A (zh) * 2022-01-18 2022-05-13 中国人民解放军63919部队 头戴式增强现实系统的视觉和惯性混合位姿跟踪方法
WO2022218215A1 (zh) * 2021-04-13 2022-10-20 影石创新科技股份有限公司 视频精彩片段的检测方法、装置、计算机设备和存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101599179A (zh) * 2009-07-17 2009-12-09 北京邮电大学 场地运动精彩镜头集锦自动生成方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101599179A (zh) * 2009-07-17 2009-12-09 北京邮电大学 场地运动精彩镜头集锦自动生成方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
于俊清,杨明,何云峰: "《基于精彩度的足球视频精彩镜头提取》", 《第三届和谐人机环境联合学术会议(HHME2007)论文集》 *
文 军,谢毓湘,老松杨: "《足球比赛视频中的精彩镜头分析方法》", 《计算机工程》 *

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103888842A (zh) * 2014-04-17 2014-06-25 江苏银河电子股份有限公司 基于智能机顶盒的有线电视视频画面信息数据的获取方法
CN103888842B (zh) * 2014-04-17 2018-01-19 江苏银河电子股份有限公司 基于智能机顶盒的有线电视视频画面信息数据的获取方法
CN107071270A (zh) * 2016-02-10 2017-08-18 奥林巴斯株式会社 摄像装置及其摄像方法
CN107071270B (zh) * 2016-02-10 2020-07-10 奥林巴斯株式会社 摄像装置及其摄像方法
CN105959804A (zh) * 2016-04-28 2016-09-21 乐视控股(北京)有限公司 智能播放方法及装置
CN106075869A (zh) * 2016-08-10 2016-11-09 张阳 跑动量在网球比赛中的统计方法及系统
WO2018027691A1 (zh) * 2016-08-10 2018-02-15 张阳 跑动量在网球比赛中的统计方法及系统
CN108229282A (zh) * 2017-05-05 2018-06-29 商汤集团有限公司 关键点检测方法、装置、存储介质及电子设备
CN107168934A (zh) * 2017-05-15 2017-09-15 掌阅科技股份有限公司 电子书情节提示方法、电子设备及计算机存储介质
CN107224714A (zh) * 2017-06-20 2017-10-03 安徽禹缤体育科技有限公司 一种羽毛球比赛数据记录管理系统
CN107341821A (zh) * 2017-06-20 2017-11-10 安徽禹缤体育科技有限公司 一种基于羽毛球场馆摄像机的运动量展示系统
CN107349593A (zh) * 2017-06-20 2017-11-17 安徽禹缤体育科技有限公司 一种提高观众观看兴趣的选手个人数据统计及展示方法
CN109977735A (zh) * 2017-12-28 2019-07-05 优酷网络技术(北京)有限公司 运动精彩片段的提取方法及装置
CN109344697A (zh) * 2018-08-16 2019-02-15 中国科学院信息工程研究所 一种对抗性竞赛中的精彩时刻识别方法
CN109344697B (zh) * 2018-08-16 2021-11-09 中国科学院信息工程研究所 一种对抗性竞赛中的精彩时刻识别方法
US11080532B2 (en) 2019-01-16 2021-08-03 Mediatek Inc. Highlight processing method using human pose based triggering scheme and associated system
US11295084B2 (en) 2019-09-16 2022-04-05 International Business Machines Corporation Cognitively generating information from videos
CN111291617A (zh) * 2020-01-13 2020-06-16 西北农林科技大学 基于机器学习的羽毛球赛事视频精彩片段提取方法
CN111291617B (zh) * 2020-01-13 2023-11-17 西北农林科技大学 基于机器学习的羽毛球赛事视频精彩片段提取方法
WO2021174391A1 (zh) * 2020-03-02 2021-09-10 深圳市大疆创新科技有限公司 比赛画面的获取方法和装置及拍摄装置的控制方法和装置
CN112957712A (zh) * 2021-02-05 2021-06-15 北京深蓝长盛科技有限公司 排球运动中主攻队员扣球数据的统计方法和装置及设备
CN113052033A (zh) * 2021-03-15 2021-06-29 深圳软牛科技有限公司 视频精彩度测量方法、装置、设备及存储介质
WO2022218215A1 (zh) * 2021-04-13 2022-10-20 影石创新科技股份有限公司 视频精彩片段的检测方法、装置、计算机设备和存储介质
CN113361643A (zh) * 2021-07-02 2021-09-07 人民中科(济南)智能技术有限公司 基于深度学习的通用标志识别方法、系统、设备及存储介质
CN114485637A (zh) * 2022-01-18 2022-05-13 中国人民解放军63919部队 头戴式增强现实系统的视觉和惯性混合位姿跟踪方法

Also Published As

Publication number Publication date
CN102890781B (zh) 2016-01-13

Similar Documents

Publication Publication Date Title
CN102890781B (zh) 一种针对羽毛球比赛视频的精彩镜头识别方法
Huang et al. Tracknet: A deep learning network for tracking high-speed and tiny objects in sports applications
CN110152273B (zh) 一种基于智能目标识别的跳绳计数方法
CN102289948B (zh) 高速公路场景下一种多特征融合的多车辆视频跟踪方法
CN105512618B (zh) 视频跟踪方法
Avgerinakis et al. Recognition of activities of daily living for smart home environments
Chen et al. Recognizing tactic patterns in broadcast basketball video using player trajectory
Direkoǧlu et al. Team activity recognition in sports
CN100589117C (zh) 一种基于步态的性别识别方法
CN107506734A (zh) 一种群体突发异常事件检测与定位方法
CN109684919B (zh) 一种基于机器视觉的羽毛球发球违例判别方法
CN104102910A (zh) 基于时空局部模式的体育视频战术行为识别方法
CN110111362A (zh) 一种局部特征块相似匹配目标跟踪方法
CN108280844A (zh) 一种基于区域候选框跟踪的视频目标定位方法
CN108986143A (zh) 一种视频中目标检测跟踪方法
Sha et al. Understanding and analyzing a large collection of archived swimming videos
Sangüesa et al. Identifying basketball plays from sensor data; towards a low-cost automatic extraction of advanced statistics
Hsu et al. Coachai: A project for microscopic badminton match data collection and tactical analysis
CN105139419A (zh) 一种足球比赛视频的球员及球体跟踪方法
He et al. Notice of violation of ieee publication principles: study on sports volleyball tracking technology based on image processing and 3D space matching
CN109460724A (zh) 基于对象检测的停球事件的分离方法和系统
CN103577804A (zh) 基于sift流和隐条件随机场的人群异常行为识别方法
Liu et al. Research on action recognition of player in broadcast sports video
Tong et al. Action recognition new framework with robust 3D-TCCHOGAC and 3D-HOOFGAC
Li et al. Tracking and detection of basketball movements using multi-feature data fusion and hybrid YOLO-T2LSTM network

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20180425

Address after: 130012 Jilin Changchun Chaoyang District people's street 187, Chang Fei District 133 1 door 602 room

Patentee after: CHANGCHUN YIHANG INTELLIGENT TECHNOLOGY CO., LTD.

Address before: 100191 Xueyuan Road, Haidian District, Beijing, No. 37

Patentee before: Beihang University

CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: 100015 Beijing Chaoyang District Jiuxianqiao North Road No. 76 Building One Floor 007

Patentee after: Beijing Yihangyuan Intelligent Technology Co., Ltd.

Address before: 130012 Jilin Changchun Chaoyang District people's street 187, Chang Fei District 133 1 door 602 room

Patentee before: CHANGCHUN YIHANG INTELLIGENT TECHNOLOGY CO., LTD.