CN117377517A - 显示控制装置、方法及程序 - Google Patents

显示控制装置、方法及程序 Download PDF

Info

Publication number
CN117377517A
CN117377517A CN202280006841.6A CN202280006841A CN117377517A CN 117377517 A CN117377517 A CN 117377517A CN 202280006841 A CN202280006841 A CN 202280006841A CN 117377517 A CN117377517 A CN 117377517A
Authority
CN
China
Prior art keywords
club head
toe
heel
golf club
positions
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202280006841.6A
Other languages
English (en)
Inventor
仓地伸尚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Amples Ltd
Original Assignee
Amples Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2022077045A external-priority patent/JP7148192B1/ja
Application filed by Amples Ltd filed Critical Amples Ltd
Publication of CN117377517A publication Critical patent/CN117377517A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B60/00Details or accessories of golf clubs, bats, rackets or the like
    • A63B60/46Measurement devices associated with golf clubs, bats, rackets or the like for measuring physical parameters relating to sporting activity, e.g. baseball bats with impact indicators or bracelets for measuring the golf swing
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/20Drawing from basic elements, e.g. lines or circles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • G06T7/74Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/97Determining parameters from multiple pictures
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2102/00Application of clubs, bats, rackets or the like to the sporting activity ; particular sports involving the use of balls and clubs, bats, rackets, or the like
    • A63B2102/32Golf
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/806Video cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30221Sports video; Sports image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30241Trajectory

Abstract

具备:摄影图像获取部(21),其获取拍摄高尔夫球杆(41)的球杆头(41a)所得到的摄影图像;特定位置检测部(22),其通过对已学习模型输入由摄影图像获取部(21)获取到的摄影图像,来检测摄影图像中包含的球杆头(41a)的趾部及跟部的位置信息,已学习模型是对拍摄高尔夫球杆(41)的球杆头(41a)所得到的多个摄影图像与各摄影图像中包含的球杆头(41a)的趾部及跟部的位置信息之间的关系进行机器学习而得到的;以及控制部(23),其使得显示基于由特定位置检测部(22)检测出的球杆头(41a)的趾部及跟部的位置信息的信息。

Description

显示控制装置、方法及程序
技术领域
本发明涉及一种基于拍摄挥动高尔夫球杆的期间的球杆头所得到的摄影图像来显示与挥杆有关的信息的显示控制装置、方法及程序。
背景技术
以往,提出了各种拍摄高尔夫球手的挥杆并提供其拍摄信息的装置。通过将挥杆的拍摄信息提供给高尔夫球手,能够促进高尔夫球技的进步或促使该高尔夫球手选择合适的高尔夫球杆。
作为上述的装置,例如专利文献1中提出了以下方案:从上方拍摄挥出高尔夫球杆时的高尔夫球杆和高尔夫球,并且使得该拍摄得到的球杆头和高尔夫球的图像以实物大小投影显示到地面。
现有技术文献
专利文献
专利文献1:日本特开2018-61729号公报
专利文献2:日本专利第6904624号公报
发明内容
发明要解决的问题
在此,作为在高尔夫球手的挥杆中重要的要素,有球杆头的打击面的运动、挥杆期间的球杆头的移动轨迹等。通过识别挥杆期间的球杆头的打击面的运动、移动轨迹,能够掌握高尔夫球手的挥杆的特征,并且能够选择与该特征相符合的高尔夫球杆。
然而,仅通过例如专利文献1那样从上方拍摄移动中的球杆头,是难以基于其摄影图像来高精度地检测出球杆头的位置、打击面的。
另外,在专利文献2中,提出了以下方法:对球杆头粘贴用于测量球杆头的标记,通过检测该标记来高精度地检测球杆头的打击面等。
然而,即使是专利文献2所记载的方法,也需要对球杆头粘贴用于测量球杆头的标记。因而,在例如要针对各种高尔夫球杆检测球杆头的打击面的运动等的情况下,需要对各个高尔夫球杆粘贴用于测量球杆头的标记,耗工费时。
本发明鉴于上述的问题,目的在于提供一种能够更简易地确认与高尔夫球杆的挥杆有关的信息的显示控制装置、方法及程序。
用于解决问题的方案
本发明的显示控制装置具备:摄影图像获取部,其获取拍摄高尔夫球杆的球杆头所得到的摄影图像;特定位置检测部,其通过对已学习模型输入由摄影图像获取部获取到的摄影图像,来检测摄影图像中包含的球杆头的趾部及跟部的位置信息,所述已学习模型是对拍摄高尔夫球杆的球杆头所得到的多个摄影图像与各摄影图像中包含的球杆头的趾部及跟部的位置信息之间的关系进行机器学习而得到的;以及控制部,其使得显示基于由特定位置检测部检测出的球杆头的趾部及跟部的位置信息的信息。
本发明的显示控制方法包括:获取拍摄高尔夫球杆的球杆头所得到的摄影图像;通过对已学习模型输入上述获取到的摄影图像,来检测该摄影图像中包含的球杆头的趾部及跟部的位置信息,所述已学习模型是对拍摄高尔夫球杆的球杆头所得到的多个摄影图像与各摄影图像中包含的球杆头的趾部及跟部的位置信息之间的关系进行机器学习而得到的;以及使得显示基于进行该检测所得到的球杆头的趾部及跟部的位置信息的信息。
本发明的显示控制程序使计算机执行以下步骤:获取拍摄高尔夫球杆的球杆头所得到的摄影图像;通过对已学习模型输入上述获取到的摄影图像,来检测该摄影图像中包含的球杆头的趾部及跟部的位置信息,所述已学习模型是对拍摄高尔夫球杆的球杆头所得到的多个摄影图像与各摄影图像中包含的球杆头的趾部及跟部的位置信息之间的关系进行机器学习而得到的;以及使得显示基于进行该检测所得到的球杆头的趾部及跟部的位置信息的信息。
发明的效果
根据本发明的显示控制装置、方法及程序,通过对已学习模型输入摄影图像来检测该摄影图像中包含的球杆头的趾部及跟部的位置信息,并使得显示基于进行该检测所得到的球杆头的趾部及跟部的位置信息的信息,因此能够更简易地确认与高尔夫球杆的挥杆有关的信息。
附图说明
图1是示出使用了本发明的显示控制装置的一个实施方式的高尔夫击球分析系统的概要结构的图。
图2是示出被检测出球杆头的趾部及跟部、高尔夫球杆的颈部及杆身的图像端的位置信息的摄影图像的一例的图。
图3是示出通过1次高尔夫球杆的挥杆而生成的打击面的线段的组和轨道图像的投影显示例的图。
图4是示出通过2次高尔夫球杆的挥杆而生成的打击面的线段的组和轨道图像的投影显示例的图。
图5是用于说明图1所示的高尔夫击球分析系统的处理的流程的流程图。
具体实施方式
下面,参照附图来详细说明使用了本发明的显示控制装置的一个实施方式的高尔夫击球分析系统。本实施方式的高尔夫击球分析系统的特征在于以下方法:基于摄影图像来检测球杆头的特定的位置,显示基于该特定的位置的信息。但是,首先对高尔夫击球分析系统整体进行说明。图1是本实施方式的高尔夫击球分析系统1的概要结构图。
如图1所示,本实施方式的高尔夫击球分析系统1具备摄影装置10、控制装置20以及投影装置30。摄影装置10与控制装置20之间以及控制装置20与投影装置30之间能够通过有线或无线来以可通信的方式连接,构成为能够发送接收各种信号。
摄影装置10从上方拍摄高尔夫球手40挥出高尔夫球杆41时的该高尔夫球杆41的球杆头41a。摄影装置10设置于比挥动高尔夫球杆41的高尔夫球手40靠上方的位置,为了能够拍摄到球杆头41a在地面的附近经过的范围而设置于上述范围的正上方。具体地说,摄影装置10例如设置于规定的摄影范围R的正上方,预先设定在地面上的高尔夫球42的设置位置P包含在该规定的摄影范围R的中心附近。摄影装置10既可以例如设置于支架等支承构件,也可以设置于天花板。
摄影装置10具备照明部11和摄像机部12。本实施方式的照明部11具有红外光源,将从该红外光源发出的红外光照射到上述摄影范围R。另外,摄像机部12具有CMOS(Complementary metal-oxide-semiconductor:互补金属-氧化物-半导体)图像传感器、CCD(Charge-coupled devices:电荷-耦合器件)图像传感器等摄像元件以及配置于该摄像元件的前表面的IR滤光器。IR滤光器是吸收可见光且使红外光透过的光学滤波器。
摄影装置10基于从控制装置20的后述的控制部23输出的控制信号来从照明部11射出红外光,并通过摄像机部12来进行上述摄影范围R的拍摄。具体地说,摄影装置10以规定的帧率从照明部11射出红外光,并且拍摄经过上述摄影范围R的球杆头41a。由摄影装置10以规定的帧率拍摄得到的摄影图像被输出到控制装置20。
控制装置20由计算机等构成,具备CPU(Central Processing Unit:中央处理单元)、ROM(Read Only Memory:只读存储器)和RAM(Random access memory:随机存取存储器)等半导体存储器、硬盘等存储设备以及通信I/F等硬件。在本实施方式中,控制装置20相当于本发明的显示控制装置。
控制装置20具备摄影图像获取部21、特定位置检测部22、控制部23、显示部24以及输入部25。
控制装置20的半导体存储器或硬盘中安装有高尔夫击球分析程序。而且,通过由CPU执行该程序,上述的摄影图像获取部21、特定位置检测部22以及控制部23发挥功能。此外,在本实施方式中,使上述的各部的功能全部通过高尔夫击球分析程序执行,但是不限于此,也可以使一部分或全部的功能由ASIC(Application Specific Integrated Circuit:专用集成电路)、FPGA(Field-Programmable Gate Array:现场可编程门阵列)、其它电路等硬件构成。
下面,详细说明控制装置20的各部。
摄影图像获取部21获取在挥动高尔夫球杆41的期间由摄影装置10按时间序列拍摄球杆头41a所得到的多个摄影图像。
特定位置检测部22检测由摄影图像获取部21获取到的各摄影图像中包含的球杆头41a的趾部(toe)及跟部(heel)、高尔夫球杆41的颈部(neck)及杆身(shaft)41b的图像端的位置信息。
图2是示出通过特定位置检测部22检测出球杆头41a的趾部及跟部、高尔夫球杆41的颈部及杆身41b的图像端的位置信息的摄影图像的一例的图。点P1是趾部的位置,点P2是跟部的位置,点P3是颈部的位置,点P4是杆身41b的图像端的位置。
如图2所示,杆身41b的图像端是指摄影图像中包含的表示杆身的图像中的与球杆头41a侧相反的端,即,是表示杆身的图像与摄影图像的端(边)相交叉的点。此后,将杆身41b的图像端称作“边缘”。
具体地说,特定位置检测部22具有已学习模型,该已学习模型是预先对拍摄球杆头41a所得到的多个任意的摄影图像与各该摄影图像中包含的球杆头41a的趾部及跟部、高尔夫球杆41的颈部及杆身41b的边缘的位置信息之间的关系进行机器学习而得到的。
而且,特定位置检测部22通过对该已学习模型输入由摄影图像获取部21获取到的摄影图像,来检测所输入的该摄影图像中包含的趾部、跟部、颈部及边缘的位置信息。作为已学习模型,例如是使用卷积神经网络(Convolutional Neural Network)生成的,但是不限于此,也可以使用其它公知的机器学习模型来进行机器学习。
例如通过对在趾部、跟部、颈部及边缘的位置标注有注释的摄影图像进行机器学习来生成已学习模型。机器学习是基于语义分割的机器学习、考虑了热图的关键点机器学习的技术进行的。
另外,优选的是,设为已学习模型是对明度不同的多个摄影图像与各摄影图像中包含的趾部、跟部、颈部及边缘的位置信息之间的关系进行机器学习而得到的。即,作为在使已学习模型进行机器学习时使用的多个摄影图像,优选为明度不同的摄影图像。由此,例如即使在向已学习模型输入的摄影图像的照明环境不同、明度不同的情况下,也能够以同等的精度检测趾部、跟部、颈部及边缘的位置信息。此外,在对已学习模型输入作为检测对象的摄影图像时,更优选的是,特定位置检测部22对摄影图像实施灰度的平均化(平坦化)处理。
另外,在本实施方式中,设为特定位置检测部22具有已学习模型,但是不限于此,例如也可以使用在不同于控制装置20的外部服务器装置中预先存储的已学习模型。
接着,控制部23对高尔夫击球分析系统1整体进行控制。具体地说,控制部23经由通信I/F来与摄影装置10进行通信,对摄影装置10输出用于指示拍摄开始时机、拍摄的帧率等的控制信号。另外,控制部23经由通信I/F来与投影装置30进行通信,使各种信息通过投影装置30显示于地面。
特别是,本实施方式的控制部23基于由特定位置检测部22检测出的球杆头41a的趾部及跟部、高尔夫球杆41的颈部及杆身41b的边缘的位置信息,来使各种信息通过投影装置30显示于地面。
具体地说,如图2所示,控制部23将趾部、跟部、颈部及边缘的位置用点来表示并使它们显示在摄影图像Im上。另外,控制部23使显示部24依次显示在挥动高尔夫球杆41的期间按时间序列拍摄得到的摄影图像Im,并使趾部、跟部、颈部及边缘的位置以点的方式显示在该依次显示的各摄影图像Im上。由此,能够识别挥动高尔夫球杆41的期间的趾部、跟部、颈部及边缘的位置的运动,从而能够确认挥杆的好坏,或者能够确认高尔夫球杆41的合适与否。
另外,控制部23不仅能够使趾部、跟部、颈部及边缘的位置以点的方式显示,还能够基于它们的位置信息来使与高尔夫球杆41的挥杆有关的信息通过投影装置30显示于地面。
具体地说,控制部23能够通过将摄影图像中的趾部的位置与跟部的位置用直线连结,来生成表示球杆头41a的打击面的线段,并使得显示该线段。此外,本说明书整体均使用了打击面这一词语,该打击面是指球杆头41a的、高尔夫球所撞击的面,也有时用“face面”这一词语来表示。即,本说明书中使用的打击面和“face面”为相同含义。此外,在本实施方式中,在木头球杆的情况下,将顶(crown)部与打击面的边界线作为表示打击面的线段,在金属头球杆的情况下,将相当于打击面最下部的前缘部作为表示打击面的线段。
另外,控制部23能够基于在挥动高尔夫球杆41的期间按时间序列拍摄得到的各摄影图像来分别生成上述的表示球杆头41a的打击面的线段,并使得显示表示打击面的线段的组。
另外,控制部23能够计算上述的各摄影图像的表示打击面的线段的中心位置,并将计算出的多个该中心位置连结来进行曲线近似,由此生成球杆头41a的轨道图像,并使得显示该轨道图像。
图3是示出通过1次高尔夫球杆41的挥杆而生成的打击面的线段FG的组、球杆头41a的轨道图像TG的投影显示例的图。投影装置30例如如图3所示那样在地面上投影显示打击面的线段FG的组及轨道图像TG。此外,图3所示的CG是表示球杆头的三维对象图像。
三维对象图像CG不同于由摄影装置10拍摄得到的摄影图像,三维对象图像CG是将球杆头示意性地表示为三维图像的图像。表示球杆头的该三维对象图像CG也由控制部23生成。而且,控制部23将该三维对象图像CG输出到投影装置30,并使得将该三维对象图像CG通过投影装置30投影显示到地面。
在图3中,示出了轨道图像TG上的规定的位置的球杆头的三维对象图像CG,但是也可以是,通过控制部23的控制,投影装置30使三维对象图像CG沿着轨道图像TG的线移动来进行动画显示。
另外,在图3中,是将通过1次挥杆得到的打击面的线段FG的组及轨道图像TG进行投影显示的例子,但是也可以将通过2次以上的挥杆得到的打击面的线段的组与轨道图像叠加地进行投影显示。图4是将通过第1次挥杆得到的打击面的线段FG1的组与轨道图像TG1的组合以及通过第2次挥杆得到的打击面的线段FG2的组与轨道图像TG2的组合进行投影显示的例子。优选的是,将通过第1次挥杆得到的打击面的线段FG1的组与轨道图像TG1的组合、以及通过第2次挥杆得到的打击面的线段FG2的组与轨道图像TG2的组合用不同的颜色进行投影显示。
另外,控制部23能够基于颈部及边缘的位置信息来使与高尔夫球杆41的杆身41b有关的信息通过投影装置30显示于地面。具体地说,控制部23例如基于将颈部的位置信息与边缘的位置信息连结的直线来生成表示杆身41b的线段,并使得显示该线段。控制部23能够使在挥动高尔夫球杆41的期间按时间序列拍摄得到的摄影图像通过投影装置30依次显示于地面,并且能够使得在该依次显示的各摄影图像上显示表示杆身41b的线段。由此,能够识别挥动高尔夫球杆41的期间的杆身41b的运动,从而能够有助于对挥杆的分析、高尔夫球杆的选择。
另外,控制部23可以计算上述的各摄影图像的表示打击面的线段的中心位置,并基于帧之间的中心位置的距离以及帧率来计算球杆头41a的速度。而且,控制部23也可以使计算出的该球杆头41a的速度通过投影装置30显示于地面。
另外,控制部23使得趾部、跟部、颈部及边缘的位置信息、球杆头41a的打击面的线段的组及轨道图像、以及表示杆身41b的线段等还显示于显示部24。
显示部24例如具备液晶显示器等显示设备。另外,输入部25例如具备鼠标、键盘等输入设备。另外,也可以是,由平板终端构成控制装置20,由触摸面板构成显示部24和输入部25。
接着,返回到图1,投影装置30由投影仪构成,如上所述那样通过由控制装置20的控制部23进行的控制,来在地面上投影显示附有趾部、跟部、颈部及边缘的点的摄影图像、打击面的线段的组及轨道图像。投影装置30设置于比挥动高尔夫球杆41的高尔夫球手靠上方的位置,或者使用短焦/近距镜头等设置于靠下方的位置,并且与摄影装置10相邻地设置。另外,投影装置30具有能够将摄影图像、打击面的线段的组及轨道图像以足够的明亮度且清楚地显示到地面上的投射距离和亮度。
投影装置30被设置成能够将附有趾部、跟部、颈部及边缘的点的摄影图像、打击面的线段的组及轨道图像投影显示到规定的投影范围,其中,地面上的高尔夫球42的设置位置P包含在该规定的投影范围的中心附近。投影装置30例如既可以与摄影装置10一起设置于支架等支承构件,也可以设置于天花板。
此外,在上述实施方式中,通过摄影装置10从正上方拍摄球杆头41a,但是不限于此,例如也可以设置立体摄像机作为摄影装置10,对球杆头41a进行立体拍摄。
而且,也可以是,特定位置检测部22从通过立体拍摄获取到的各摄影图像中检测趾部、跟部、颈部及边缘的位置信息,由此检测趾部、跟部、颈部及边缘的在三维空间上的位置。由此,能够更详细地分析高尔夫球杆41的运动。控制部23例如将趾部、跟部、颈部及边缘的在三维空间上的位置通过直线连结来生成三维的线段图像,并使得该线段图像以三维方式显示于显示部24。
接着,参照图5所示的流程图来说明高尔夫击球分析系统1的处理的流程。
首先,高尔夫击球分析系统1的各装置被启动(S10)。接下来,如图1所示那样高尔夫球手站在摄影范围R的附近,将高尔夫球42设置在摄影范围R内的高尔夫球的设置位置P。
然后,由用户在控制装置20中进行拍摄开始指示的设定输入,使摄影装置10开始拍摄(S12)。
在摄影装置10开始拍摄之后,高尔夫球手挥动高尔夫球杆41,击打高尔夫球42(S14)。
在高尔夫球手挥动高尔夫球杆41的期间,由摄影装置10以规定的帧率拍摄摄影范围R内的摄影图像(S16),按时间序列拍摄得到的摄影图像被依次输出到控制装置20。摄影装置10在从拍摄开始起经过了预先设定的时间的时间点结束拍摄(S18)。
从摄影装置10输出的摄影图像被输入到控制装置20,并由摄影图像获取部21获取(S20)。特定位置检测部22将由摄影图像获取部21获取到的各摄影图像输入到上述的已学习模型,来检测各摄影图像上的趾部、跟部、颈部及边缘的位置信息(S22)。
然后,控制部23使按时间序列拍摄得到的多个摄影图像通过投影装置30显示于地面,并且以在该各摄影图像的趾部、跟部、颈部及边缘的位置叠加点的方式使上述点显示在该各摄影图像上(S24)。由此,能够识别挥杆期间的趾部、跟部、颈部及边缘的位置的移动状态,从而能够更简易地确认与高尔夫球杆的挥杆有关的信息。
另外,在上述实施方式中,使得显示趾部、跟部、颈部及边缘这4个部位的点,但是不限于此,例如也可以使得显示趾部及跟部这2个部位的点,或者使得显示趾部、跟部及颈部这3个部位的点。
另外,在上述实施方式中,说明了从正上方拍摄球杆头41a的例子,但是只要至少能够拍摄到趾部和跟部,优选是能够拍摄到趾部、跟部以及颈部,更优选是能够拍摄到趾部、跟部、颈部以及边缘,则拍摄角度不限于此。例如,也可以学习从斜横向等拍摄球杆头41a所得到的摄影图像,执行用于识别从该方向拍摄得到的摄影图像的机器学习,来生成已学习模型。
关于本发明,还公开以下附记。
(附记)
在本发明的显示控制装置中,已学习模型能够设为还对多个摄影图像与各摄影图像中包含的高尔夫球杆的颈部的位置信息之间的关系进行机器学习而得到的,特定位置检测部能够还检测高尔夫球杆的颈部的位置信息,控制部能够使得显示基于高尔夫球杆的颈部的位置信息的信息。
另外,在本发明的显示控制装置中,已学习模型能够设为还对多个摄影图像与各摄影图像中包含的高尔夫球杆的颈部及高尔夫球杆的杆身的图像端的位置信息之间的关系进行机器学习而得到的,特定位置检测部能够还检测高尔夫球杆的颈部及杆身的图像端的位置信息,控制部能够使得显示基于高尔夫球杆的颈部及杆身的图像端的位置信息的信息。
另外,在本发明的显示控制装置中,控制部能够基于球杆头的趾部及跟部的位置信息来生成表示球杆头的打击面的线段,并使得显示该线段。
另外,在本发明的显示控制装置中,控制部能够基于将高尔夫球杆的颈部的位置信息与高尔夫球杆的杆身的图像端的位置信息连结的直线来生成表示杆身的线段,并使得显示该线段。
另外,在本发明的显示控制装置中,控制部能够基于球杆头的趾部及跟部的位置信息来生成球杆头的移动轨迹的信息,并使得显示该信息。
另外,在本发明的显示控制装置中,已学习模型能够设为对明度不同的多个摄影图像与各摄影图像中包含的球杆头的趾部及跟部的位置信息之间的关系进行机器学习而得到的。
附图标记说明
1:高尔夫击球分析系统;10:摄影装置;11:照明部;12:摄像机部;20:控制装置;21:摄影图像获取部;22:特定位置检测部;23:控制部;24:显示部;25:输入部;30:投影装置;40:高尔夫球手;41:高尔夫球杆;41a:球杆头;41b:杆身;42:高尔夫球;CG:球杆头的三维对象图像;P:设置位置;P1:表示趾部的点;P2:表示跟部的点;P3:表示颈部的点;P4:表示边缘的点;R:摄影范围。

Claims (9)

1.一种显示控制装置,具备:
摄影图像获取部,其获取从上方按时间序列拍摄挥动高尔夫球杆的期间的球杆头所得到的多个摄影图像;
特定位置检测部,其通过对已学习模型输入由所述摄影图像获取部获取到的多个摄影图像,来分别检测所述多个摄影图像中包含的球杆头的趾部及跟部的位置,所述已学习模型是对从上方拍摄高尔夫球杆的球杆头所得到的多个任意的摄影图像与各所述摄影图像中包含的所述球杆头的趾部及跟部的位置之间的关系进行机器学习而得到的;以及
控制部,其使得由所述特定位置检测部检测出的所述球杆头的趾部及跟部的位置以点的方式显示在所述多个摄影图像上,并且使得依次显示叠加有所述点的所述多个摄影图像。
2.根据权利要求1所述的显示控制装置,其特征在于,
所述已学习模型是还对所述多个任意的摄影图像与各所述摄影图像中包含的所述高尔夫球杆的颈部的位置信息之间的关系进行机器学习而得到的,
所述特定位置检测部还检测所述高尔夫球杆的颈部的位置,
所述控制部使得所述高尔夫球杆的颈部的位置以点的方式显示在所述多个摄影图像上。
3.根据权利要求1所述的显示控制装置,其特征在于,
所述已学习模型是还对所述多个任意的摄影图像与各所述摄影图像中包含的所述高尔夫球杆的颈部及所述高尔夫球杆的杆身的图像端的位置之间的关系进行机器学习而得到的,
所述特定位置检测部还检测所述高尔夫球杆的颈部及杆身的图像端的位置,
所述控制部使得所述高尔夫球杆的颈部及杆身的图像端的位置以点的方式显示在所述多个摄影图像上。
4.根据权利要求1所述的显示控制装置,其特征在于,
所述控制部基于所述球杆头的趾部及跟部的位置来生成表示所述球杆头的打击面的线段,并使得显示该线段。
5.根据权利要求3所述的显示控制装置,其特征在于,
所述控制部基于将所述高尔夫球杆的颈部的位置与所述高尔夫球杆的杆身的图像端的位置连结的直线来生成表示所述杆身的线段,并使得显示该线段。
6.根据权利要求1所述的显示控制装置,其特征在于,
所述控制部基于所述球杆头的趾部及跟部的位置来生成所述球杆头的移动轨迹的信息,并使得显示该信息。
7.根据权利要求1所述的显示控制装置,其特征在于,
所述已学习模型是对明度不同的多个摄影图像与各所述摄影图像中包含的所述球杆头的趾部及跟部的位置之间的关系进行机器学习而得到的。
8.一种显示控制方法,包括以下步骤:
获取从上方按时间序列拍摄挥动高尔夫球杆的期间的球杆头所得到的多个摄影图像;
通过对已学习模型输入所获取到的所述多个摄影图像,来分别检测所述多个摄影图像中包含的球杆头的趾部及跟部的位置,所述已学习模型是对从上方拍摄高尔夫球杆的球杆头所得到的多个任意的摄影图像与各所述摄影图像中包含的所述球杆头的趾部及跟部的位置信息之间的关系进行机器学习而得到的;以及
使得进行该检测所得到的所述球杆头的趾部及跟部的位置以点的方式显示在所述多个摄影图像上,并且使得依次显示叠加有所述点的所述多个摄影图像。
9.一种显示控制程序,所述显示控制程序使计算机执行以下步骤:
获取从上方按时间序列拍摄挥动高尔夫球杆的期间的球杆头所得到的多个摄影图像;
通过对已学习模型输入所获取到的所述多个摄影图像,来检测所述多个摄影图像中包含的球杆头的趾部及跟部的位置,所述已学习模型是对从上方拍摄高尔夫球杆的球杆头所得到的多个任意的摄影图像与各所述摄影图像中包含的所述球杆头的趾部及跟部的位置信息之间的关系进行机器学习而得到的;以及
使得进行该检测所得到的所述球杆头的趾部及跟部的位置以点的方式显示在所述多个摄影图像上,并且使得依次显示叠加有所述点的所述多个摄影图像。
CN202280006841.6A 2022-05-09 2022-12-21 显示控制装置、方法及程序 Pending CN117377517A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2022-077045 2022-05-09
JP2022077045A JP7148192B1 (ja) 2022-05-09 2022-05-09 表示制御装置および方法並びにプログラム
PCT/JP2022/047052 WO2023218692A1 (ja) 2022-05-09 2022-12-21 表示制御装置および方法並びにプログラム

Publications (1)

Publication Number Publication Date
CN117377517A true CN117377517A (zh) 2024-01-09

Family

ID=88689358

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202280006841.6A Pending CN117377517A (zh) 2022-05-09 2022-12-21 显示控制装置、方法及程序

Country Status (5)

Country Link
US (1) US20240115904A1 (zh)
KR (1) KR102618193B1 (zh)
CN (1) CN117377517A (zh)
AU (1) AU2022417274B2 (zh)
CA (1) CA3204843A1 (zh)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6582641B2 (ja) * 2015-07-07 2019-10-02 株式会社プロギア ゴルフクラブのスウィングの表示方法
JP2018061729A (ja) 2016-10-14 2018-04-19 株式会社フローベル 画像処理システムおよびその制御方法
KR102335944B1 (ko) * 2017-12-22 2021-12-06 트랙맨 에이/에스 스포츠 공 타격 요소의 충격 특성을 결정하는 시스템 및 방법
EP4091680A4 (en) * 2020-01-16 2023-07-26 Creatz Inc. METHOD AND SYSTEM FOR MEASUREMENT OF A PHYSICAL QUANTITY CONNECTED TO A GOLF CLUB AND NON-TRANSITORY COMPUTER READABLE RECORDING MEDIA
JP6904624B1 (ja) 2021-01-21 2021-07-21 有限会社Amplus クラブヘッド計測用マークおよび画像処理装置

Also Published As

Publication number Publication date
KR20230158468A (ko) 2023-11-20
AU2022417274A1 (en) 2023-11-23
KR102618193B1 (ko) 2023-12-27
US20240115904A1 (en) 2024-04-11
CA3204843A1 (en) 2023-11-09
AU2022417274B2 (en) 2024-02-08

Similar Documents

Publication Publication Date Title
US20140003666A1 (en) Sensing device and method used for virtual golf simulation apparatus
JP2001264016A (ja) ボールの運動測定装置
JP5626939B2 (ja) 運動するボールに対するセンシング処理装置、センシング処理方法及びそれを用いた仮想ゴルフシミュレーション装置
KR102232253B1 (ko) 두 개의 골프영상과 결과 데이터를 하나로 겹쳐서 확인하는 어플리케이션을 이용한 자세비교 및 교정 방법
WO2023218692A1 (ja) 表示制御装置および方法並びにプログラム
US11077351B2 (en) Measurement and reconstruction of the golf launching scene in 3D
US20220226710A1 (en) Mark for club head measurement and image processing device
KR20210033290A (ko) 골프 시뮬레이션 장치를 이용한 스윙자세 교육방법
JP2013538067A (ja) 運動するオブジェクトに対するセンシング装置、センシング処理方法及びそれを用いた仮想ゴルフシミュレーション装置
KR101019829B1 (ko) 운동하는 볼에 대한 센싱처리장치, 센싱처리방법 및 이를 이용한 가상 골프 시뮬레이션 장치
JP6986766B2 (ja) 画像処理装置およびプログラム
KR102268954B1 (ko) 골프 공 타격을 감지하는 방법 및 이를 이용한 골프 스윙 모션 분석 장치
KR101019801B1 (ko) 오브젝트 운동 센싱장치 및 센싱방법과, 이를 이용한 가상 골프 시뮬레이션 장치
KR101019902B1 (ko) 운동하는 볼에 대한 센싱처리장치, 센싱처리방법 및 이를 이용한 가상 골프 시뮬레이션 장치
JP2018061729A (ja) 画像処理システムおよびその制御方法
CN117377517A (zh) 显示控制装置、方法及程序
JP3051407B1 (ja) 連続撮影装置及び方法
KR101019847B1 (ko) 운동하는 볼에 대한 센싱처리장치, 센싱처리방법 및 이를 이용한 가상 골프 시뮬레이션 장치
KR20150113800A (ko) 단말 장치, 프로그램 및 표시 방법
JP7471030B1 (ja) 表示制御装置および方法並びにプログラム
KR101260862B1 (ko) 영상 비교 시스템
KR101019824B1 (ko) 오브젝트 운동 센싱장치 및 센싱방법과, 이를 이용한 가상 골프 시뮬레이션 장치
JP6710961B2 (ja) ゴルフスイングの解析方法
CN114681885B (zh) 高尔夫挥杆解析系统、高尔夫挥杆解析方法及信息存储媒体
TWI775636B (zh) 高爾夫揮桿解析系統、高爾夫揮桿解析方法及資訊記憶媒體

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40097026

Country of ref document: HK