CN108355340B - 一种基于视频信息的拍球计数方法 - Google Patents

一种基于视频信息的拍球计数方法 Download PDF

Info

Publication number
CN108355340B
CN108355340B CN201810116215.8A CN201810116215A CN108355340B CN 108355340 B CN108355340 B CN 108355340B CN 201810116215 A CN201810116215 A CN 201810116215A CN 108355340 B CN108355340 B CN 108355340B
Authority
CN
China
Prior art keywords
ball
bouncing
video information
counting
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201810116215.8A
Other languages
English (en)
Other versions
CN108355340A (zh
Inventor
林峰
游兆阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University ZJU
Original Assignee
Zhejiang University ZJU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University ZJU filed Critical Zhejiang University ZJU
Priority to CN201810116215.8A priority Critical patent/CN108355340B/zh
Publication of CN108355340A publication Critical patent/CN108355340A/zh
Application granted granted Critical
Publication of CN108355340B publication Critical patent/CN108355340B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0669Score-keepers or score display devices
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B2071/0647Visualisation of executed movements

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种基于视频信息的拍球计数方法,属于健身运动技术领域,利用高清摄录设备(如:智能手机等),从一定的角度对包括拍球人在内的整个拍球过程进行录制,然后分别对视频信息进行处理后将球的中心像素点的高度变化图像绘制到坐标系中,且以时间帧为横轴,排除掉自然弹跳后通过计算图像峰值的数量来确定拍球次数。运用视觉感观的机理分析,将视频信息进行判断,来实现对拍球进行自动计数,提高了精确度。该方法不需要采用专用皮球即可实现自动精确计数,不仅可以即时计数,也可以进行录像回放。尤其随着移动摄录设备的广泛采用,该方法将具有更强的实用性。

Description

一种基于视频信息的拍球计数方法
技术领域
本发明涉及健身运动技术领域,具体地说,涉及一种基于视频信息的拍球计数方法。
背景技术
拍皮球对小孩子来说是一项有益身体健康的活动,它不仅能促进孩子手眼动作的协调,增强体质,而且能促进左右脑的平衡,培养孩子的耐力和坚持性等良好品质,对孩子的发展有不可低估的作用,因此各地幼儿园常常会组织这类的比赛游戏。但拍球的过程中需要有专人统计计数,幼儿园小孩人数众多,对每人计数会很耽误老师的宝贵时间;而且有时当拍球速度快或者人注意力不集中的时候,很容易出现计数错误,因此,迫切需要一种能自动计数的办法。
现有技术中,公布号为CN106474718A的中国专利文献公开了一种击球计数方法及装置,通过检测手臂或手腕的当前运动轨迹确定当前运动是否击球成功,若击球成功,则在上次统计的击球成功次数的基础上加一,以此来对击球次数进行计数。该方法能够有效提高统计的精确度,但对于手握球拍的运动,比如乒乓球、羽毛球比较合适,但不适用于统计拍皮球运动。
公告号为CN 205198858U的中国专利文献公开了一种具有拍球数计数功能的智能皮球,以及公告号为CN205198855U的中国专利文献公开了一种智能皮球玩具,这两篇专利文献都是通过对皮球本身进行改进,通过在皮球上安装传感器来实现精确计数的目的,在拍球的过程中很有可能对传感器造成破坏,影响计数结果。
发明内容
本发明的目的为提供一种基于视频信息的拍球计数方法,通过对人在拍球计数过程中运用视觉的机理分析,对视频信息进行判断,来实现对拍球进行自动精确计数。
为了实现上述目的,本发明提供基于视频信息的拍球计数方法包括以下步骤:
1)获取拍球动作的原始视频数据;
2)从原始视频数据中提取出图像数据;
3)对图像数据进行单帧处理,并找出每帧图像中球的像素点,以时间帧为横坐标,距地高度为纵坐标建立球的像素点的高度-时间帧关系图;
4)沿横坐标找出每个拍球周期,并排除自然弹跳后计入拍球次数。
上述技术方案中,利用高清摄录设备(如:智能手机等),从一定的角度对包括拍球人在内的整个拍球过程进行录制,然后对视频信息进行处理后将球的中心像素点的高度变化图像绘制到坐标系中,且以时间帧为横轴,排除掉自然弹跳后通过计算图像峰值的数量来确定拍球次数。运用视觉感观的机理分析,将视频信息进行判断,来实现对拍球进行自动计数,提高了精确度。
具体的方案为步骤3)中找出每帧图像中球的像素点包括:对单帧图像进行预处理后分割图像;采用支持向量机方法对分割后的图像进行特征识别,识别出球的像素点,定位球的位置。
由于要实现图像目标的直接定位,所以要进行重复的分割。例如对于9X9的图片,传统的分割方法是分成9个3X3的图片,但是这样需要定位的目标可能被区块分割,或者由于区块太大,导致定位的不精确。所以本发明采取的方法为:对于左上6X6个点遍历,取36个3X3的识别区域,这样就精确定位到像素点了。
更具体的方案为支持向量机方法包括:对分割后的图片进行特征提取,预设正样本和负样本,并对正样本和负样本中的参数进行学习和分类,利用分类结果处理后续的图片。
更具体的方案为对分割后的图像进行特征识别时采取横纵方向均隔一个像素点进行采样。
另一个具体的方案为步骤4)中排除自然弹跳的方法采用判断中心像素点下降和上升的距离是否大于对应时间内自由落体的距离。
球在接近地面以及从空中掉落时会有比较大的转折,因此每两个转折之间是一个拍球周期。对于一个击球周期(完整的下降和上升),要符合以下几点以排除自然弹跳:
上升和下降的高度相近,同时不能太短;
上升和下降用时相近;
下降、上升距离应该大于对应时间内自由落体的距离。
记一个下降-上升周期内的下降幅度为Ldown,上升幅度为Lup,下降用时为Tdown,则:
空间关系:
Ldown、Lup>Dmin
|Ldown-Lup|<Ld
时间关系:
|Tdown-Tup|<Td
时空对应关系:
在一次合理的击球过程中Dmin为最小的击球高度,Ld为上升和下降的最大高度差,Td为最大用时差,L为下落距离,g为重力加速度,T为下落用时,D用来修正空气阻力等的影响,这个式子表示下落的距离应该大于相同用时内自由落体的距离,因为击球有初速度。
通过判断上升和下降高度关系,可以得出这段时间内的有效击球次数。
与现有技术相比,本发明的有益效果为:
本发明的基于视频信息的拍球计数方法不需要采用专用皮球即可实现自动精确计数,不仅可以即时计数,也可以进行录像回放。尤其随着移动摄录设备的广泛采用,该方法将具有更强的实用性。
附图说明
图1为本发明实施例的基于视频信息的拍球计数方法的流程图;
图2为本发明实施例的找出每帧图像中球的像素点的流程图;
图3为本发明实施例的球的像素点的高度-时间帧关系图;
图4为本发明实施例的取反后的球的像素点的高度-时间帧关系图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,以下结合实施例及其附图对本发明作进一步说明。
实施例
参见图1,本实施例的基于视频信息的拍球计数方法包括以下步骤:
获取步骤S1,通过录像设备获取拍球动作的原始视频数据(.avi)。
提取步骤S2,从原始视频数据(.avi)中提取出图像数据;
视频处理步骤S3,对图像数据进行单帧处理,本实施例用VideoReader函数读取单帧图像,找出每帧图像中球的像素点,以时间帧为横坐标,距地高度为纵坐标建立球的像素点的高度-时间帧关系图;
参见图2,找出每帧图像中球的像素点包括:对单帧图像进行预处理后分割图像,预处理主要把黑屏等明显的不合格图像去除;采用支持向量机方法对分割后的图像进行特征识别,识别出球的像素点,直至结果输出定位球的位置。
图像分割采取的方法为:对于左上6X6个点遍历,取36个3X3的识别区域,这样就精确定位到像素点了。
采取了以下几种方法分别对灰度和彩色的图片进行了目标识别:
直接模板匹配
形状(轮廓)匹配
颜色(灰度)匹配
SVM分类
定位球的位置时,考虑到计算时间的因素,不能进行简单的图片分割,所以在原来的遍历过程中,本实施例遍历每一个像素点,取出一定大小的模板进行识别,实际上,对于一个大约64X64的大小的模块,几个像素的误差并不会造成太大的影响,在横纵方向都隔一个像素点进行采样,则总共的计算量下降为原先的1/4。
参见图3,把每帧的最佳匹配的像素点的纵坐标取出来绘制折线图线得到球的像素点的高度-时间帧关系图。由于像素纵坐标和视频对应的距地高度是相反的,所以本实施例取相反的高度,得到如图4所示的视频中的球高度位置图。
本实施例的支持向量机方法包括:对分割后的图片进行特征提取,预设正样本和负样本,并对正样本和负样本中的参数进行学习和分类,利用分类结果处理后续的图片。具体如下:
1.选取一定量的正面样本(球)和负面样本(其他);
2.提取样本特征(比如piotr_toolbox里提供的HOG函数);
3.创造SVM结构体:SVMStruct=svmtrain(Training,Group),group为training数据对应的标注,一般来说,正面样本标注为1,负面样本标注为-1,
svmtrain里还可以选取核函数,用法为svmStruct=svmtrain(Training,Group,'Kernel_Function','rbf')通过尝试选取区别度大的核函数即可
4.用创造好的结构体进行分类,classes=svmclassify(svmStruct,test_data)
判断步骤S4,沿横坐标找出每个拍球周期,并排除自然弹跳后计入拍球次数。
球在接近地面以及从空中掉落时会有比较大的转折,因此每两个转折之间是一个拍球周期。对于一个击球周期(完整的下降和上升),要符合以下几点以排除自然弹跳:
上升和下降的高度相近,同时不能太短;
上升和下降用时相近;
下降、上升距离应该大于对应时间内自由落体的距离。
记一个下降-上升周期内的下降幅度为Ldown,上升幅度为Lup,下降用时为Tdown,则:
空间关系:
Ldown、Lup>Dmin
|Ldown-Lup|<Ld
时间关系:
|Tdown-Tup|<Td
时空对应关系:
在一次合理的击球过程中Dmin为最小的击球高度,Ld为上升和下降的最大高度差,Td为最大用时差,L为下落距离,g为重力加速度,T为下落用时,D用来修正空气阻力等的影响,这个式子表示下落的距离应该大于相同用时内自由落体的距离,因为击球有初速度。
从图4中可看出前面部分处于非击球状态,后面是规律的击球状态。球在接近地面时会有比较大的转折。通过判断上升和下降高度关系,可以得出这段时间内的有效击球次数为8次。
输出步骤S5,将计数结果输出并显示。

Claims (5)

1.一种基于视频信息的拍球计数方法,其特征在于,包括以下步骤:
1)获取拍球动作的原始视频数据;
2)从原始视频数据中提取出图像数据;
3)对图像数据进行单帧处理,并找出每帧图像中球的像素点,以时间帧为横坐标,距地高度为纵坐标建立球的像素点的高度-时间帧关系图;
4)沿横坐标找出每个拍球周期,并排除自然弹跳后计入拍球次数;
步骤3)中所述的找出每帧图像中球的像素点包括:对单帧图像进行预处理后分割图像;采用支持向量机方法对分割后的图像进行特征识别,识别出球的像素点,定位球的位置。
2.根据权利要求1所述的基于视频信息的拍球计数方法,其特征在于:
所述的支持向量机方法包括:对分割后的图片进行特征提取,预设正样本和负样本,并对正样本和负样本中的参数进行学习和分类,利用分类结果处理后续的图片。
3.根据权利要求2所述的基于视频信息的拍球计数方法,其特征在于:
所述的对分割后的图像进行特征识别时采取横纵方向均隔一个像素点进行采样。
4.根据权利要求1所述的基于视频信息的拍球计数方法,其特征在于:
步骤4)中所述的排除自然弹跳的方法采用判断中心像素点下降和上升的距离是否大于对应时间内自由落体的距离。
5.根据权利要求4所述的基于视频信息的拍球计数方法,其特征在于:
所述的判断中心像素点下降和上升的距离是否大于对应时间内自由落体的距离包括:
空间关系:
Ldown、Lup>Dmin
|Ldown-Lup|<Ld
时间关系:
|Tdown-Tup|<Td
时空对应关系:
其中,Ldown为下降-上升周期内的下降幅度,Lup为上升幅度,Tdown为下降用时;在一次合理的击球过程中Dmin为最小的击球高度,Ld为上升和下降的最大高度差,Td为最大用时差,L为下落距离,g为重力加速度,T为下落用时,D用来修正空气阻力等的影响,表示下落的距离大于相同用时内自由落体的距离。
CN201810116215.8A 2018-02-06 2018-02-06 一种基于视频信息的拍球计数方法 Expired - Fee Related CN108355340B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810116215.8A CN108355340B (zh) 2018-02-06 2018-02-06 一种基于视频信息的拍球计数方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810116215.8A CN108355340B (zh) 2018-02-06 2018-02-06 一种基于视频信息的拍球计数方法

Publications (2)

Publication Number Publication Date
CN108355340A CN108355340A (zh) 2018-08-03
CN108355340B true CN108355340B (zh) 2019-06-18

Family

ID=63004498

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810116215.8A Expired - Fee Related CN108355340B (zh) 2018-02-06 2018-02-06 一种基于视频信息的拍球计数方法

Country Status (1)

Country Link
CN (1) CN108355340B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109876416B (zh) * 2019-03-26 2020-06-19 浙江大学 一种基于图像信息的跳绳计数方法
CN110210360B (zh) * 2019-05-24 2021-01-08 浙江大学 一种基于视频图像目标识别的跳绳计数方法
CN110585685A (zh) * 2019-08-30 2019-12-20 上海讯哲体育科技有限公司 球类运动计分装置和球类运动计分方法
CN113797515A (zh) * 2021-08-31 2021-12-17 海南翔睿德科技有限公司 一种自动计数的乒乓球发球机

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8617008B2 (en) * 2001-09-12 2013-12-31 Pillar Vision, Inc. Training devices for trajectory-based sports
CN102542571B (zh) * 2010-12-17 2014-11-05 中国移动通信集团广东有限公司 一种运动目标检测方法及装置
CN106408588A (zh) * 2016-04-29 2017-02-15 广西科技大学 一种基于图像处理技术的投篮命中率影响因素的分析方法
CN106422210B (zh) * 2016-10-13 2018-07-20 北京昊翔信达科技有限公司 一种基于图像处理的人体运动状态检测方法及系统
CN107103298B (zh) * 2017-04-21 2020-08-14 桂林电子科技大学 基于图像处理的引体向上计数系统及计数方法

Also Published As

Publication number Publication date
CN108355340A (zh) 2018-08-03

Similar Documents

Publication Publication Date Title
CN108355340B (zh) 一种基于视频信息的拍球计数方法
CN110210360B (zh) 一种基于视频图像目标识别的跳绳计数方法
CN110728225B (zh) 一种用于考勤的高速人脸搜索方法
CN101477626B (zh) 一种在复杂场景的视频中进行人体头肩检测的方法
CN103186775B (zh) 基于混合描述子的人体运动识别方法
CN109939432B (zh) 一种智能跳绳计数方法
CN104123543B (zh) 一种基于人脸识别的眼球运动识别方法
CN107169985A (zh) 一种基于对称帧间差分和背景更新的运动目标检测方法
CN109876416B (zh) 一种基于图像信息的跳绳计数方法
CN106886778B (zh) 一种监控场景下车牌字符分割与识别方法
CN106886216A (zh) 基于rgbd人脸检测的机器人自动跟踪方法和系统
CN102214309A (zh) 一种基于头肩模型的特定人体识别方法
CN110781962B (zh) 基于轻量级卷积神经网络的目标检测方法
CN112446437A (zh) 一种基于机器视觉的货架商品规格识别方法
CN108960142A (zh) 基于全局特征损失函数的行人再识别方法
CN103413149B (zh) 复杂背景中实现静态目标检测和识别的方法
CN109684919B (zh) 一种基于机器视觉的羽毛球发球违例判别方法
CN103065163B (zh) 一种基于静态图片的快速目标检测识别系统及方法
CN108256481A (zh) 一种利用身体上下文的行人头部检测方法
CN103310193B (zh) 一种记录体操视频中运动员重要技术动作时刻的方法
CN110599463A (zh) 一种基于轻量级联神经网络的舌像检测及定位算法
CN109409294A (zh) 基于对象运动轨迹的停球事件的分类方法和系统
CN109035296A (zh) 一种改进的视频中运动物体检测方法
CN103955673B (zh) 一种基于头肩模型的人体识别方法
CN114187664A (zh) 一种基于人工智能的跳绳计数系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190618

Termination date: 20220206