WO2017026664A1 - 골프스윙영상 정보 제공 시스템, 골프스윙영상 정보 제공을 위한 카메라 장치 및 골프스윙영상 정보 제공방법 - Google Patents

골프스윙영상 정보 제공 시스템, 골프스윙영상 정보 제공을 위한 카메라 장치 및 골프스윙영상 정보 제공방법 Download PDF

Info

Publication number
WO2017026664A1
WO2017026664A1 PCT/KR2016/007390 KR2016007390W WO2017026664A1 WO 2017026664 A1 WO2017026664 A1 WO 2017026664A1 KR 2016007390 W KR2016007390 W KR 2016007390W WO 2017026664 A1 WO2017026664 A1 WO 2017026664A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
user
ball
swing
golf
Prior art date
Application number
PCT/KR2016/007390
Other languages
English (en)
French (fr)
Inventor
조흥렬
Original Assignee
주식회사 골프존
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 골프존 filed Critical 주식회사 골프존
Priority to JP2018505422A priority Critical patent/JP6555699B2/ja
Publication of WO2017026664A1 publication Critical patent/WO2017026664A1/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B69/00—Training appliances or apparatus for special sports
    • A63B69/36—Training appliances or apparatus for special sports for golf
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00—Teaching not covered by other main groups of this subclass
    • G09B19/003—Repetitive work cycles; Sequence of movements
    • G09B19/0038—Sports
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B2071/0675—Input for modifying training controls during workout
    • A63B2071/0677—Input by image recognition, e.g. video signals
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B2071/0675—Input for modifying training controls during workout
    • A63B2071/068—Input by voice recognition

Definitions

  • the present invention relates to a golf swing image information providing system, a camera device for providing golf swing image information, and a method for providing golf swing image information. More particularly, the present invention relates to a golf swing image at a golf course.
  • the present invention relates to a network system that can be obtained and stored in a main server so that it can be easily provided to a user and the like, and a device and a method for providing information.
  • golf is an exercise that must hit a small golf ball accurately
  • golf swing posture is considered very important to the golfer and golfers always spare a lot of effort and investment in improving the golf swing posture.
  • the golfer wants to record his golf swing during the golf round process as a video when his / her record is good. Looking at his golf swing through video, he tends to solve his golf swing problem.
  • a conventional golf swing image providing apparatus or system simply detects a hit sound when a user hits a golf ball by using a sound sensor, that is, based on the impact point based on the impact point.
  • the swing image of the user was extracted from the captured image and provided.
  • the impact point Specifying the impact point based only on the sound detection result of the sound sensor, for example, when the sound sensor reacts to other sounds in the surroundings even when the impact sound is not generated at all, the impact point is determined to be the wrong point at all, and a sufficient level of the sound is not detected. As a result, the sound sensor malfunctioned in many cases.
  • the present invention provides a golf swing video information providing system that can easily provide golf swing video information to a user playing a golf round in the golf course, using the analysis result of the video on the user's golf swing, or the video analysis Golf swing video information providing system that can extract and provide a user's swing image fairly consistently and stably from the acquired image by using the result and detection result of hitting sound during swing, camera device for providing golf swing video information And to provide a golf swing video information providing method.
  • At least one camera device having an image acquisition unit for acquiring the image of the golf swing of the user in the shooting area; And receiving the image acquired by the image acquisition unit, analyzing the received image, recognizing at least one of a golf club and a ball in the analyzed image, and extracting a reference point for extracting an image to be provided to the user from the received image.
  • a data processing server which extracts an image corresponding to a predetermined section based on the determined reference time point from the image received from the image acquisition unit as the swing image of the user, and is extracted by the data processing server.
  • the swing image information of the user is provided to the user.
  • the golf swing image information providing system for acquiring the image of the golf swing of the user in the shooting area, and the golf club head as the user makes a golf swing
  • At least one camera device including a sound detection unit for detecting a hitting sound hitting a golf ball; Receiving the acquired image and analyzing the received image to obtain at least one of a golf club and a ball in the analyzed image, and using the two pieces of information of the detection result information of the sound detection unit.
  • a reference time point for determining an image to be provided to the user is determined from the received image, and an image corresponding to a preset section based on the determined reference time point in the image received from the image acquisition unit is used as the swing image of the user.
  • Including a data processing server to extract provides the swing image information of the user extracted by the data processing server to the user.
  • the camera device for providing golf swing image information the image acquisition unit for acquiring the image of the golf swing of the user in the shooting area; An image collecting unit collecting the image acquired by the image obtaining unit; An image analyzer for analyzing at least one of a golf club and a ball by analyzing images of each frame collected by the image collecting unit, and analyzing a behavior characteristic of at least one of the extracted golf club and a ball in a continuous frame image; And a reference time point for extracting an image to be provided to the user from the collected images by using the analysis result of the image analyzer, and a preset section based on the determined reference time point in the image received from the image acquisition unit. And a data processor extracting an image corresponding to the swing image as the swing image of the user, thereby providing the swing image information of the user extracted by the data processor to the user.
  • the camera device for providing golf swing image information the image acquisition unit for acquiring the image of the user swinging golf in the shooting area; An acoustic sensing unit for detecting a hitting sound of the golf club head hitting the golf ball as the user makes a golf swing; An image collecting unit collecting the image acquired by the image obtaining unit; An image analyzer for analyzing at least one of a golf club and a ball by analyzing images of each frame collected by the image collecting unit, and analyzing a behavior characteristic of at least one of the extracted golf club and a ball in a continuous frame image; And receiving information about a detection result of the sound detection unit, and determining a reference time point for extracting an image to be provided to the user from the collected images by using the analysis result of the image analyzer and the detection result of the sound detection unit. And a data processor configured to extract an image corresponding to a preset section as the swing image of the user from the image received from the image acquirer as the swing image of the user. Provide image information to
  • the golf swing image information providing method at least one camera device and connected to the data processing server for extracting the user's swing image information from the image obtained by the camera device for providing to the user;
  • a golf swing image information providing method using a golf swing image information providing system comprising: receiving and analyzing an image acquired by an image acquisition unit of the camera device from the data processing server; Extracting and recognizing at least one of a golf club and a ball in the analysis image; Determining a reference time point for extracting an image to be provided to the user from an image received from the image acquisition unit by using recognition result information of at least one of the golf club and the ball; And extracting, as the swing image information of the user, an image corresponding to a preset section based on the determined reference time point from the image received from the image acquisition unit.
  • the golf swing image information providing method at least one camera device and connected to the data processing server for extracting the user's swing image information from the image acquired by the camera device to provide the user
  • a golf swing image information providing method using a golf swing image information providing system comprising: receiving and analyzing an image acquired by an image acquisition unit of the camera apparatus from a data processing server; Extracting and recognizing at least one of a golf club and a ball in the analysis image; Receiving, by the data processing server, the result information detected by the sound detection unit for detecting a hitting sound of the golf club head hitting the golf ball as the user swings the golf ball; A reference time point for extracting an image to be provided to the user from the image received from the image acquisition unit by using at least two pieces of information of at least one of the recognition result information of the golf club and the ball and the detection result information of the sound detection unit. Determining; And extracting, as the swing image information of the user, an image corresponding to a preset section based on the determined reference
  • Golf swing image information providing system a camera device for providing golf swing image information and the method of providing golf swing image information, a system suitable for simply and stably providing golf swing image information to a user playing a golf round at a golf course And an apparatus and method, and by using the analysis result of the image of the golf swing of the user or by using the analysis result of the image and the detection of the impact sound during the swing, the user's swing image in the acquired image is fairly constant And there is an effect that can be stably extracted and provided.
  • FIG. 1 is a diagram illustrating an example of a case where a camera device of a golf swing image information providing system according to an embodiment of the present invention photographs a golf swing of a user.
  • FIG. 2 is a view showing an example of the golf swing image information providing system according to an embodiment of the present invention is implemented in a specific hole of the golf course.
  • FIG. 3 is a block diagram showing the configuration of a golf swing image information providing system according to an embodiment of the present invention.
  • Figure 4 is a block diagram showing the configuration of a golf swing image information providing system according to another embodiment of the present invention.
  • FIG. 5 is a flowchart illustrating a method of providing golf swing image information according to an embodiment of the present invention.
  • FIG. 6 is a flowchart for explaining an example of a process related to analysis of an image and determination of a reference time point illustrated in FIG. 5 in more detail.
  • FIG. 7 and 8 are views for explaining an example of the golf club recognition process described in FIG. 6 in detail.
  • FIG. 9 are diagrams for describing an example of a ball recognition process described in FIG. 6 in detail.
  • a golf swing image information providing system, a camera device for providing golf swing image information, and a golf swing image information providing method according to the present invention will be described in more detail with reference to the accompanying drawings.
  • the golf swing image information providing system is an image of the golf swing motion when a user who makes a round of golf at a golf course makes a specific shot, such as a tee shot for each specific hole or every hole, during the golf round. Create and provide it to the user.
  • the golf swing image information providing system may basically include a camera apparatus 100 and a data processing server T. Referring to FIG.
  • the camera device 100 is a device including a camera that is installed in an area where the user swings the golf and acquires an image when the user swings the golf.
  • the data processing server T collects and analyzes an image acquired by the camera apparatus 100 to properly extract a golf swing image portion of the user from the image acquired by the camera apparatus 100 and provide the same to the user. It is a device that processes data.
  • FIG. 1 illustrates an example in which a camera device 100 of a golf swing image information providing system according to an embodiment of the present invention photographs a golf swing of a user.
  • the camera device 100 may be structurally configured as a head portion (H), a column portion (C), a support (R), the image acquisition unit 110 and the sound detection unit in the head portion (H)
  • a component such as 140 may be incorporated, and a ready alarm unit 130 for alarming that the camera device 100 is ready to analyze the swing image before the user swings the golf as shown in FIG. It may be provided.
  • the ready alarm unit 130 may be configured to give an audible alarm such as "ready” by providing a visual alarm by displaying in red when it is not ready with an LED lamp, and blue when it is ready. Can be.
  • the structural configuration of the camera device 100 of the golf swing image information providing system is not limited to that shown in FIG. 1 and includes components such as an image acquisition unit, a sound detection unit, and a ready alarm unit. Any structure may be possible as long as the structure is possible.
  • the image acquisition unit 110 may be configured to include a single camera for capturing a user's swing motion, or may be configured in the form of a twin camera of a swing image camera and an analysis image camera.
  • the image acquisition unit 110 is preferably configured to capture and acquire an image at an appropriate angle of view so that the user P, the golf club GC, and the ball BA can be sufficiently included in the acquired image. Do.
  • the acquired golf swing image of the user from the time the user P takes an address posture to the completion of the golf swing is included in the acquired image. It includes all the videos when you don't swing golf.
  • the data processing server T takes all the acquired images from the camera apparatus 100, analyzes them, sets an appropriate reference time point, and selects an image corresponding to a predetermined range based on the reference time.
  • the data processing process of extracting as a "swing image" is performed. Details thereof will be described later.
  • Figure 2 shows an example in which the golf swing image information providing system according to an embodiment of the present invention is implemented in one hole of the golf course.
  • each hole of the golf course is provided with a female tee area (Red Tee or Lady Tee), a male tee area (White Tee or Man's Tee), a champion tee area (Champion Tee) and a professional tee area (Professional Tee).
  • a female tee area Red Tee or Lady Tee
  • a male tee area White Tee or Man's Tee
  • a champion tee area Champion Tee
  • a professional tee area Professional Tee.
  • some of the tee areas overlap each other and some tee areas may be omitted, but the above four tee areas are generally provided.
  • the hole shown in FIG. 2 shows the case where the female tee area LT, the male tee area WT and the champion tee area CT are provided.
  • each of the user to install the camera device (100, 101, 102) in the tee area golf swing Whether you are a female, male, semi-professional or professional athlete, you are building a system that allows you to extract golf swing footage.
  • Each camera device (100, 101, 102) is connected to one data processing server (T) and the image acquired by each camera device is sent to the data processing server (T) and processed to the main server (S) By being stored, the user may receive his swing image through the main server S.
  • T data processing server
  • S main server
  • the data processing server T is indicated by a dotted line to indicate that the data processing server T may be embedded in the ground while being provided in the enclosure.
  • the housing it is also possible to configure the housing to be provided on the ground.
  • camera apparatuses 100 and the like of each tee region are connected to the data processing server T through the AP apparatus 300.
  • the image data acquired by each camera apparatus 100 and the like is acquired. It is preferable to be connected in a wired communication method capable of high-capacity high-speed transmission to enable high-speed transmission to the data processing server (T).
  • the AP device 300 is a means for allowing the data processing server T to communicate wirelessly with the main server S in a manner such as WiFi as an access point.
  • Each camera device 100 may be configured to include the image acquisition unit 110, the power supply unit 120, the ready alarm unit 130, and the sound detection unit 140 in the same manner.
  • the image acquisition unit 110 may be configured to include a single camera for capturing a user's swing motion. At this time, the image acquired by the single camera is used to be analyzed by the data processing server T and at the same time, the analysis result. It is also used to extract the swing image of the user from the acquired image on the basis of. Therefore, it is preferable that a single camera as the image acquisition unit 110 has a resolution sufficient to perform image analysis.
  • the data processing server T collects images acquired by the swing video camera and the analysis video camera, respectively, When analyzing, the image obtained by the analysis video camera is used, and when extracting a user swing image to be provided to the user according to the result of the image analysis, the corresponding image is extracted from the image acquired by the swing image camera.
  • the data processing server T may include an image collector T10, an image analyzer T20, and a data processor T30.
  • the image acquisition unit T10 receives and collects the image acquired by the image acquisition unit 110 in real time, and then for each frame of the image to be collected to extract a 'user swing image' from the collected image. It is desirable to mark and collect indices.
  • the image analyzer T20 extracts a golf club and a ball through the difference image analysis for the image of each frame collected by the image collector T10, and each of the extracted golf club and the ball in the image of a continuous frame. Analyze the behavior of
  • the data processor T30 determines a reference time point for extracting an image to be provided to the user from the collected image by using the analysis result of the image analyzer T20, and by the image collector T10. Extracts user swing image information based on the determined reference time point from the collected image and transmits the information to the main server S.
  • the data processor T30 may determine the 'reference point' using the analysis result of the golf club and the ball in the image by the image analyzer T20, but the golf club and the ball may be determined. From the perspective of the more stable and constant quality image extraction is configured to determine the 'reference point' by using the impact sound detection result of the acoustic detection unit 140 provided in the camera device (100, etc.) More preferred.
  • the process for extracting and providing the swing image of the user is initiated by the wireless caddy terminal 400 and the extracted swing image information of the user can be managed.
  • the wireless caddy terminal 400 may be implemented in the form of a so-called smartphone or tablet PC, and implemented in the form of a caddy-only terminal for collectively managing a team consisting of three to four people playing a golf round at a golf course. May be
  • the main server S stores and registers personal information or identification information of each user who plays a golf round.
  • the personal information or information of each user who plays the golf round is also stored in the wireless caddy terminal 400.
  • the identification information is stored in advance or received from the main server S and stored.
  • the main server (S) prepares to store an image for the user (eg, creates a folder for the user) and sends a signal to the data processing server T, the data processing server T is the camera device 100. Sends a video acquisition start signal to the.
  • the camera device 100 According to the image acquisition start signal of the data processing server T, the camera device 100 notifies the ready state through the ready alarm unit 130 and starts image acquisition.
  • the image acquired by the camera apparatus 100 is transmitted and stored in real time to the image collecting unit T10 of the data processing server T, and image analysis and data processing as described above are performed.
  • Figure 4 shows a configuration of a golf swing video information providing system including a camera device for providing golf swing video information according to an embodiment of the present invention as a block diagram.
  • the camera device and the data processing server are separately provided.
  • the configuration of the data processing server is integrated with the camera device. .
  • the camera device 200 for providing golf swing image information includes an image acquisition unit 210, a power supply unit 220, a ready alarm unit 230, The sound detector 240, the image collector 250, the image analyzer 260, and the data processor 270 are all included.
  • the system according to the present embodiment may be provided with a camera device in each tee area provided in a hole of a golf course, and the camera device referred to by reference numeral 201 of FIG. 4 is 200.
  • Camera device installed in the tee area different from the camera device No. 200, and the configuration thereof is the same as that of the camera device 200 or does not include the configuration of the image collecting unit 250, the image analyzing unit 260, and the data processing unit 270. (In this case, the processing of the image information acquired by the camera device 201 is performed by the image collector 250, the image analyzer 260, and the data processor 270 provided in the camera device 200. Can be configured).
  • the AP device 300, the wireless caddy terminal 400, and the main server S illustrated in FIG. 4 are also the same as those described with reference to FIG. 3, the description thereof will be omitted.
  • the flowchart shown in FIG. 5 relates to a process performed in the golf swing image information providing system having the configuration shown in FIG. 3.
  • the caddy or another user wirelessly connects the wireless caddy terminal to the main server through the AP device (eg, WiFi connection) (S10).
  • the AP device eg, WiFi connection
  • the information about the user who golf swings through the wireless caddy terminal is transmitted to the main server (S11).
  • the main server may identify identification information of each camera device, for example, a hole in which the corresponding camera device is installed
  • the information on the tee area in the hole or the identification information of each camera apparatus itself is stored, and the above identification information is also stored in the wireless caddy terminal.
  • step S11 not only the information on the user who is currently swinging golf, but also identification information of the camera device used by the user (for example, may be identification information of the camera device itself, and how many holes the corresponding camera is, Information may be sent to the main server.
  • the main server When the main server receives the information about the user in step S11, the main server searches for the user (S20) and prepares to store swing image information for the user (S21). If the user is not found, the main server registers the user through the wireless caddy terminal and creates a shared folder for the user, thereby proceeding to steps S20 and S21.
  • the main server transmits a ready signal to a data processing server (S23), and the data processing server receives a ready signal of the main server and transmits an image acquisition start signal to a camera device (S30).
  • the camera device receives an image acquisition start signal from the data processing server and alarms the user through the ready alarm unit that the user is ready for image processing by at least one of visual and audio (hereinafter referred to as "ready alarm”). S40).
  • the ready alarm unit may be configured to immediately perform a ready alarm in response to the reception of the image acquisition start signal, and the image acquisition unit of the camera device acquires an image in response to the reception of the image acquisition start signal and transmits the image to the data processing server.
  • the ready alarm unit may be configured to send a ready alarm when the image is transmitted and analyzed by the data processing server to find a ball on the analyzed image. Detailed description thereof will be described later.
  • the image acquisition unit of the camera device continuously acquires the image in the field of view (S41), and continuously transmits the acquired image to the data processing server (S42).
  • the data processing server collects an image transmitted from the camera apparatus (S31) (in this case, it is preferable to display an index for each frame to be collected), and the image analyzer of the data processing server displays the collected image for each frame.
  • Image analysis S32
  • a specific example of image analysis performed by the image analyzer will be described later.
  • the data processing unit of the data processing server receives the result of the image analysis performed in the step S32 and the result of detecting the hitting sound by the sound detection unit of the camera device (S43), and uses them appropriately to perform a 'user swing' on the collected image.
  • a reference time point for extracting the image ' is determined (S33). For example, since the collected images are several frames, index information of the corresponding frame is determined to determine which frame corresponds to a reference time point among the various frames.
  • the data processing unit of the data processing server determines a reference time point in step S33 and extracts an image based on the determined reference time point from the image collected in step S31 (S34).
  • the extracted image becomes an image corresponding to a 'user swing image' to be provided to the user.
  • the data processing server transmits the image information extracted in step S34 to the main server through the AP device (S35), and the main server stores the received image information as swing image information of the corresponding user (S25). It is also possible to create a shared folder and copy the swing image information of the user.
  • the main server stores the swing image information of the user in the shared folder of the user, and the wireless caddy terminal accesses the shared folder to execute the swing image information of the user or transmit the swing image information to the mobile terminal of the user.
  • the swing image information is provided to the corresponding user in such a manner as S12.
  • FIG. 6 illustrates a process corresponding to one example of the image analyzing step S32 and the reference point determining step S33 illustrated in FIG. 5 in more detail.
  • the process performed by the image collecting unit, the image analyzing unit, and the data processing unit of the data processing server as shown in FIG. 3 is described, which is an image collecting unit and the image analyzing unit included in the camera apparatus shown in FIG. 4. And the same may be performed in the data processing unit, and the above applies equally even if not otherwise mentioned below.
  • the image analysis unit of the data processing server may proceed to find balls in the collected images (S100).
  • the ball search process is performed when the user takes an address position on the ball.
  • the step S100 may or may not be performed according to an embodiment, and whether the ball finder succeeds or fails, the next process proceeds, and if the ball finder process succeeds, the reference point may be determined later. If the search fails, you can use a variety of other information to determine the baseline.
  • the ball finding process cannot be detected through the difference operation between two image frames because the ball is at rest, and factors such as size, roundness, ball pattern, and pixel brightness corresponding to the ball on the acquired image are detected.
  • the process of searching for a ball may be performed by using a method of searching for a ball, or a ball search may be performed by storing a template image as a reference image of a ball in advance and finding a similarity with the template image in the acquired image.
  • the image analysis unit of the data processing server is to analyze the golf club and the ball on the image by extracting the portion corresponding to the golf club and the ball from the image of each frame collected, the golf club and the ball It aims to understand how it moves, that is, its behavior.
  • difference image analysis is performed on the collected images of each frame (S110). That is, the image generated by the difference operation with the previous image of a specific image for the image of several frames that are continuous in time is the portion that has a movement, that is, the portion that corresponds to the golf club and the ball that moves after the ball is hit. Since the part appears, the golf club and the ball can be effectively extracted through the difference image analysis.
  • the difference image analysis may analyze pixels displayed on the corresponding image by using an image generated through a difference operation between two consecutive frames, and thresholds a predetermined pixel value (brightness value) for the difference image.
  • a normalized image may be generated to analyze pixels displayed on the normalized image.
  • the process of extracting and recognizing a golf club from an image by the difference image analysis and the process of extracting and recognizing a ball from an image are different processes, and each process is simultaneously performed in a multi-threading manner.
  • the golf club recognition process and the ball recognition process may proceed sequentially.
  • S121 to S123 represent a golf club recognition process
  • S141 to S143 represent a ball recognition process
  • a swing discrimination object is set (S121).
  • the swing discriminant object has a plurality of predetermined number of sections.
  • the swing discriminant object grasps the behavior characteristic of how the recognized golf club moves on the set swing discriminant object. This makes it easy to determine whether you are swinging golf. Details regarding the setting of the swing determination object will be described later.
  • the golf club can be recognized by generating and displaying a line corresponding to the golf club, that is, a club line, in the area where the pixels are concentrated (S122). When the club line is displayed, the end of the club line becomes a club head part, so that the club head part can be recognized.
  • the number of sections and the direction in which the club line is found on the swing discriminant object set in step S121 may be determined, and the user may determine whether the golf swing is made from the user. There is (S123). Details thereof will be described later with reference to FIGS. 7 and 8.
  • the ROI corresponding to a preset size and position is extracted from the collected images of each frame (S141).
  • an object that changes in position for each frame may be extracted through difference image analysis, and the like, and a height angle of a horizontal plane of the object for each frame is calculated for the object that changes in position for each frame (S142). ).
  • the ball may be recognized by determining whether the corresponding object is a ball using the calculated height angle for each frame (S143).
  • a reference time point for extracting a 'user swing image' may be determined.
  • the golf club recognition result is that the user is swinging, and the ball recognition result shows that the ball in the region of interest appears, this is because the ball is blown by the golf swing of the user.
  • this first appeared can be determined as the reference point. More specifically, when the recognized ball first appears in the ROI, the corresponding frame may be determined as the frame at the reference point.
  • the frames of the previous preset number or time interval and the frames of the subsequent preset number or time interval are extracted based on the frames at the determined reference time, respectively.
  • the image of the frame becomes the user swing image to be finally provided, and the image is transmitted to and stored in the main server.
  • the method for providing golf swing image information according to the present invention may determine a reference point for extracting a swing image as described above with the result obtained through image analysis as described above, but more clearly and stably determine a reference point.
  • the reference time for the swing image extraction using the sound detection result of the sound detection unit provided in the camera device.
  • the data processing unit of the data processing server extracts the swing image using at least two pieces of information of the result of recognizing the golf club through image analysis, the result of recognizing the ball through image analysis, and the result of detecting the hitting sound of the acoustic detection unit.
  • a reference time point for determining may be determined (S200).
  • the position information of the initial ball on the image may be stored.
  • the end portion (head portion) of the club line corresponding to the golf club and the position of the stored initial ball are the most. It is possible to specify a frame when it is close, and to determine the specified frame as a frame at a reference point.
  • step S100 it is preferable to use only to determine whether the user has made a golf swing without immediately determining the reference time point through the recognition of the golf club.
  • the determination of the reference point through the recognition of the ball has been described above.
  • the frame when the object first appears in the region of interest is determined. It can be determined by the frame at the reference point.
  • a time point at which the hitting sound is detected may be a reference point.
  • the reference time can be determined through the recognition of the golf club, the reference time can be determined through the recognition of the ball, and the reference time can also be determined through the hit sound detection result of the acoustic detector.
  • the data processing unit of the data processing server sets a priority for each of the result information of the golf club recognition result, the ball recognition result information and the sound detection result of the sound detection unit, and at least two of the above three information. If the information is successful, the reference time point may be determined based on the information having the highest priority among at least two successful information.
  • the present invention is to determine the reference point based on the other one. It is also possible to configure.
  • 7 (a) and 7 (b) show the images 10 acquired by the image acquisition unit, respectively, and show the processes for setting the 'swing discriminant object' described with reference to FIG. 6 in the image.
  • the shape for example, circular, elliptical, square, etc.
  • the number of sections S1 to S12 constituting the swing discrimination object 20 are data. It is preferable that the image analyzer of the processing server is set in advance.
  • the center of the swing determination object 20 is set at the center Cd of the image as shown in FIG.
  • the center of the swing determination object 20 is set at the center Cd of the image as shown in FIG.
  • the swing discriminant object 20 shown in (a) and (b) of FIG. 7 shows a case where there are twelve sections that are circular and divided into twelve.
  • FIG. 8A shows the original image 10 acquired by the image acquisition unit and transmitted to the image collection unit
  • Fig. 8B shows the difference calculation with the image of the image previous frame of Fig. 8A
  • FIG. 8C illustrates normalized image 11 generated by using a predetermined brightness value for the difference image 11 illustrated in FIG. 8B as a threshold and normalized the normalized image.
  • An image 12 is generated by generating a club line CL through a pixel distribution or the like in the image.
  • gc1 indicates an actual golf club
  • gc2 indicates a portion corresponding to a golf club shown on a car image
  • CL Indicated by indicates that a clubline was generated for the gc2 part.
  • FIG. 8D illustrates an image for determining how the clubline CL in the generated image as shown in FIG. 8C moves on the predetermined swing discrimination object 20.
  • the advance direction of the club line CL on the swing discriminant object 20 is set in advance as a requirement of the swing discrimination to detect the forward direction of the downswing, not the forward direction of the backswing.
  • the user P10 is in the state of starting the backswing and the ball is in the initial position.
  • the ball ba1 may be recognized through a separate ball search process.
  • the golf club recognizes the golf club through the generation of the club line CL as shown in FIG.
  • the time point near the impact may be specified, and it may be determined as the reference time point.
  • the ball may be basically recognized using difference image analysis.
  • the reference time point may be determined using the results obtained through the ball recognition process described below.
  • the golf club part gc2 and the ball part ba2 appear more clearly, and in the case of a golf club, the club line CL is generated to indicate that it is a golf club.
  • the end corresponds to the head portion HD.
  • the ball part BD is also shown more clearly.
  • the golf club part and the ball part can be clearly extracted through the difference image analysis, and the part connected to the club line CL can be recognized as the head part HD, and the part separated from the ball part is the ball part. (BD).
  • FIG. 10 illustrates a process of recognizing a ball through setting an ROI in an image.
  • the reference point is determined by extracting a region of interest (ROI) having a predetermined size and shape on the image and analyzing the extracted region of interest to determine whether there is a ball in the region of interest. can do.
  • ROI region of interest
  • the frame at which the ball first appears in the RO may be determined as the frame of the reference viewpoint.
  • the frame may be a frame at the reference time point.
  • the generation of the club line may fail, and when the club line part and the club head part appear separately, when the club head part and the ball part exist together in the region of interest, a process for recognizing which ball is required must be performed. There is.
  • FIGS. 10 (b), 10 (c) and 10 (d) enhance understanding of the ball recognition.
  • the region of interest extracted from the original image is shown.
  • the positional information of the object such as Ob1 can be known from the difference image. Therefore, the region of interest extracted from the original image can be analyzed as the region of interest extracted from the original image.
  • Oc1, Oc2 and Oc3 are objects corresponding to the head of the golf club
  • Ob1, Ob2 and Ob3 are objects corresponding to the ball.
  • the image analyzer of the data processing server of the present invention needs to determine which of the various objects, such as Oc2, Oc3, Ob1 to Ob3, present in the ROI, is to be viewed.
  • Ob1 and Oc1 are the mth frame
  • Ob2 and Oc2 are the m + 1th frame
  • Ob3 and Oc3 are the m + 2th frame, respectively. It is assumed a case in which is shown.
  • the height angle ab1 from Ob1 to Ob2 the height angle ab2 from Ob2 to Ob3, and the height angle ab3 of Ob3 have almost the same value and are relatively smaller than the height angle of the club head.
  • the height angle of the object for each frame has a different value because the clubhead moves in a curve, and the height angle is generally larger than the height angle of the ball. That is, the height angle ac1 of Oc1, the height angle ac2 of Oc2, and the height angle ac3 of Oc3 have different values.
  • the height range of each object (Oc2, Oc3, Ob1 to Ob3, etc.) is calculated in advance, and the objects having the same height angle value within the preset error range are extracted, which becomes the ball.
  • the first frame in which the ball recognized in the ROI is determined may be determined as the frame at the reference point. For example, in FIG. 10, when Ob1 appears on the ROI extracted from the n-th frame image and Oc2, Ob2, Oc3, and Ob3 appear in the n + 1th frame and the n + 2th frame, respectively, the height angle of each object is determined. If you find an object that has the same height angle within the calculated and preset error range, it is the ball.
  • a range of the height angle value itself may be set, and if it is within the range of the height angle value, the ball may be determined to be a ball, otherwise the ball may not be determined.
  • the height of the ball does not vary greatly from person to person with the same type of shot, it is possible to set an appropriate range of height angle values in advance and find an object with the height angle value within the range and recognize it as a ball. If it is recognized, it is possible to know which frame is the first frame in which the ball appeared in the ROI, and the index information of the frame is stored as frame index information at the reference point, and the preset number of frames or presets based on the frame are preset.
  • the frame of the time interval may be extracted and determined as the swing image information of the user.
  • the present invention is considerably stable and constant in consideration of golf club recognition, ball recognition, and sound detection through analysis of the image without extracting the image by simply setting the reference point based on the sound of the blow when the user strikes the ball. Since the swing image is extracted by determining the reference point, there is an advantage that stable and constant determination of the reference point and extraction of the swing image based on the reference point can be performed even if some information arises that some information necessary for the determination of the reference point occurs.
  • a camera device for providing golf swing image information and the golf swing image information providing method is a system suitable for easily and stably providing golf swing image information to the user to the round of golf at the golf course, Apparatuses and methods provide for use in the golf industry.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

본 발명은 골프장에서 골프 라운드를 하는 사용자에게 골프스윙 영상 정보를 간편하게 제공할 수 있는 골프스윙 영상 정보 제공 시스템 등을 제공하며, 사용자의 골프스윙에 대한 영상의 분석 결과를 이용하여, 또는 그 영상 분석 결과와 스윙시의 타격음 감지 결과를 이용하여, 취득된 영상에서 사용자의 스윙 영상을 상당히 일정하게 그리고 안정적으로 추출하여 제공할 수 있는, 골프스윙영상 정보 제공 시스템, 골프스윙영상 정보 제공을 위한 카메라 장치 및 골프스윙영상 정보 제공방법을 제공하기 위한 것이다.

Description

골프스윙영상 정보 제공 시스템, 골프스윙영상 정보 제공을 위한 카메라 장치 및 골프스윙영상 정보 제공방법
본 발명은 골프스윙영상 정보 제공 시스템, 골프스윙영상 정보 제공을 위한 카메라 장치 및 골프스윙영상 정보 제공방법에 관한 것으로서 더욱 상세하게는, 골프장에서 골프 라운드를 하는 사용자가 골프 스윙하는 것에 대한 영상을 효과적으로 취득하여 메인 서버에 저장해 놓음으로써 이를 사용자 등에게 용이하게 제공할 수 있도록 하는 네트워크 시스템 및 이에 이용되는 장치와 정보 제공방법에 관한 것이다.
일반적으로 골프는 작은 골프공을 정확하게 타격해야 하는 운동으로서 골프 스윙 자세가 골퍼에게는 상당히 중요하게 여겨지며 골프를 즐기는 사람들은 항상 골프 스윙 자세의 향상에 많은 노력과 투자를 아끼지 않는 경향이 있다.
특히 골프장에서 골프 라운드를 하는 경우에는 골퍼가 자신의 기록이 좋은 경우에는 골프 라운드 과정에서의 자신의 골프 스윙을 영상으로 기록하여 이를 기념하기를 원하며, 자신의 기록이 좋지 않은 경우에는 골프 라운드 과정에서의 자신의 골프 스윙을 영상을 통해 보면서 자신의 골프 스윙 문제점을 해결하고 싶어하는 경향이 있다.
그런데, 종래에 공개되어 있는 골프스윙 영상 제공 장치나 시스템은 단순히 소리센서를 이용하여 사용자가 골프공을 타격하였을 때의 타격음을 감지할 때, 즉 임팩트 시점을 기준시점으로 하여 그 임팩트 시점을 기준으로 촬영된 영상에서 사용자의 스윙 영상을 추출하여 제공하였었다.
대한민국특허출원 제2000-0002408호, 대한민국특허출원 제1994-7002515호, 대한민국특허출원 제2012-0131412호 등의 다수의 선행특허문헌에서도 소리센서를 이용하여 임팩트 시점을 특정하는 방식을 이용하는 예를 개시하고 있다.
그러나, 본 출원인의 실험 결과, 단순히 소리센서만으로 임팩트 시점을 기준시점으로 결정하여 촬영된 영상에서 사용자의 스윙 영상 부분을 추출하여 제공하는 것은 상당히 불안정적이라는 결론을 얻게 되었다.
소리센서의 타격음 감지 결과만으로 임팩트 시점을 특정하는 것은, 예컨대 실제 타격음이 발생하지도 않았는데 주변의 다른 소리에 상기 소리센서가 반응함으로써 임팩트 시점이 전혀 엉뚱한 시점으로 결정되기도 하고, 충분한 수준의 타격음이 감지되지 않아 소리센서가 오작동을 하는 경우도 상당히 많았다.
물론, 사용자의 골프스윙 영상을 추출하는데 있어서, 사용자가 골프스윙을 함에 따라 골프클럽의 헤드가 볼을 타격하는 순간의 임팩트 시점을 정확하게 특정할 필요는 없다. 어떤 기준시점이든 안정적으로 특정 시점을 결정하고 그 결정된 시점을 기준으로 하여 미리 설정된 구간의 영상을 추출하면 그 추출된 영상이 사용자의 골프스윙 영상이라는 것이 합리적으로 보장될 수 있다면 훌륭한 골프스윙 영상 정보 제공 시스템 또는 장치가 될 수 있다.
그러나, 상기한 바와 같이 소리센서에 의한 감지가 일정하지 않은데다가 오작동의 문제가 빈번하게 발생하기 때문에, 종래의 골프스윙 영상 제공 시스템 또는 장치는 상기한 바와 같은 안정적인 기준시점의 획득과 이에 기초한 사용자의 골프스윙 영상의 추출을 합리적으로 보장할 수 없는 문제점이 있었다.
본 발명은 골프장에서 골프 라운드를 하는 사용자에게 골프스윙 영상 정보를 간편하게 제공할 수 있는 골프스윙 영상 정보 제공 시스템 등을 제공하며, 사용자의 골프스윙에 대한 영상의 분석 결과를 이용하여, 또는 그 영상 분석 결과와 스윙시의 타격음 감지 결과를 이용하여, 취득된 영상에서 사용자의 스윙 영상을 상당히 일정하게 그리고 안정적으로 추출하여 제공할 수 있는, 골프스윙영상 정보 제공 시스템, 골프스윙영상 정보 제공을 위한 카메라 장치 및 골프스윙영상 정보 제공방법을 제공하기 위한 것이다.
본 발명의 일 실시예에 따른 골프스윙영상 정보 제공 시스템은, 촬영 영역 내에서 사용자가 골프 스윙을 하는 것에 대한 영상을 취득하는 영상취득부를 구비하는 적어도 하나의 카메라 장치; 및 상기 영상취득부가 취득한 영상을 전달받아 그 전달받은 영상을 분석하여 상기 분석 영상 내에서 골프클럽 및 볼 중 적어도 하나를 인식하여 상기 전달받은 영상에서 상기 사용자에게 제공할 영상을 추출하기 위한 기준시점을 결정하며, 상기 영상취득부로부터 전달받은 영상에서 상기 결정된 기준시점을 기준으로 미리 설정된 구간에 해당하는 영상을 상기 사용자의 스윙 영상으로서 추출하는 데이터 처리 서버를 포함하여, 상기 데이터 처리 서버에 의해 추출된 상기 사용자의 스윙 영상 정보를 상기 사용자에게 제공한다.
한편, 본 발명의 다른 일 실시예에 따른 골프스윙영상 정보 제공 시스템은, 촬영 영역 내에서 사용자가 골프 스윙을 하는 것에 대한 영상을 취득하는 영상취득부와, 사용자가 골프 스윙을 함에 따라 골프클럽 헤드가 골프공을 타격하는 타격음을 감지하는 음향감지부를 포함하는 적어도 하나의 카메라 장치; 및 상기 영상취득부가 취득한 영상을 전달받아 그 전달받은 영상을 분석하여 상기 분석 영상 내에서 골프클럽 및 볼 중 적어도 하나를 인식한 결과 정보 및 상기 음향감지부의 감지 결과 정보 중 두 가지 정보를 이용하여 상기 전달받은 영상에서 상기 사용자에게 제공할 영상을 추출하기 위한 기준시점을 결정하며, 상기 영상취득부로부터 전달받은 영상에서 상기 결정된 기준시점을 기준으로 미리 설정된 구간에 해당하는 영상을 상기 사용자의 스윙 영상으로서 추출하는 데이터 처리 서버를 포함하여, 상기 데이터 처리 서버에 의해 추출된 상기 사용자의 스윙 영상 정보를 상기 사용자에게 제공한다.
한편, 본 발명의 일 실시예에 따른 골프스윙영상 정보 제공을 위한 카메라 장치는, 촬영 영역 내에서 사용자가 골프 스윙을 하는 것에 대한 영상을 취득하는 영상취득부; 상기 영상취득부에 의해 취득되는 영상을 수집하는 영상수집부; 상기 영상수집부에서 수집한 각 프레임의 영상을 분석하여 골프클럽과 볼 중 적어도 하나를 추출하고 연속되는 프레임의 영상에서 상기 추출된 골프클럽과 볼 중 적어도 하나의 거동 특성을 분석하는 영상분석부; 및 상기 영상분석부의 분석 결과를 이용하여 상기 수집한 영상에서 상기 사용자에게 제공할 영상을 추출하기 위한 기준시점을 결정하며, 상기 영상취득부로부터 전달받은 영상에서 상기 결정된 기준시점을 기준으로 미리 설정된 구간에 해당하는 영상을 상기 사용자의 스윙 영상으로서 추출하는 데이터처리부를 포함하여, 상기 데이터 처리부에 의해 추출된 상기 사용자의 스윙 영상 정보를 상기 사용자에게 제공한다.
한편, 본 발명의 다른 일 실시예에 따른 골프스윙영상 정보 제공을 위한 카메라 장치는, 촬영 영역 내에서 사용자가 골프 스윙을 하는 것에 대한 영상을 취득하는 영상취득부; 사용자가 골프 스윙을 함에 따라 골프클럽 헤드가 골프공을 타격하는 타격음을 감지하는 음향감지부; 상기 영상취득부에 의해 취득되는 영상을 수집하는 영상수집부; 상기 영상수집부에서 수집한 각 프레임의 영상을 분석하여 골프클럽과 볼 중 적어도 하나를 추출하고 연속되는 프레임의 영상에서 상기 추출된 골프클럽과 볼 중 적어도 하나의 거동 특성을 분석하는 영상분석부; 및 상기 음향감지부의 감지 결과에 대한 정보를 전달받으며, 상기 영상분석부의 분석 결과 및 상기 음향감지부의 감지 결과를 이용하여 상기 수집한 영상에서 상기 사용자에게 제공할 영상을 추출하기 위한 기준시점을 결정하고, 상기 영상취득부로부터 전달받은 영상에서 상기 결정된 기준시점을 기준으로 미리 설정된 구간에 해당하는 영상을 상기 사용자의 스윙 영상으로서 추출하는 데이터처리부를 포함하여, 상기 데이터 처리부에 의해 추출된 상기 사용자의 스윙 영상 정보를 상기 사용자에게 제공한다.
한편, 본 발명의 일 실시예에 따른 골프스윙영상 정보 제공 방법은, 적어도 하나의 카메라 장치 및 이와 연결되어 상기 카메라 장치가 취득한 영상으로부터 사용자의 스윙 영상 정보를 추출하여 사용자에게 제공하는 데이터 처리 서버를 포함하는 골프스윙영상 정보 제공 시스템에 의한 골프스윙영상 정보 제공 방법으로서, 상기 카메라 장치의 영상취득부가 취득한 영상을 상기 데이터 처리 서버가 전달받아 분석하는 단계; 상기 분석 영상 내에서 골프클럽 및 볼 중 적어도 하나를 추출하여 인식하는 단계; 상기 골프클럽 및 볼 중 적어도 하나의 인식 결과 정보를 이용하여 상기 영상취득부로부터 전달받은 영상에서 상기 사용자에게 제공할 영상을 추출하기 위한 기준시점을 결정하는 단계; 및 상기 영상취득부로부터 전달받은 영상에서 상기 결정된 기준시점을 기준으로 미리 설정된 구간에 해당하는 영상을 상기 사용자의 스윙 영상 정보로서 추출하는 단계를 포함한다.
한편, 본 발명의 다른 일 실시예에 따른 골프스윙영상 정보 제공 방법은, 적어도 하나의 카메라 장치 및 이와 연결되어 상기 카메라 장치가 취득한 영상으로부터 사용자의 스윙 영상 정보를 추출하여 사용자에게 제공하는 데이터 처리 서버를 포함하는 골프스윙영상 정보 제공 시스템에 의한 골프스윙영상 정보 제공 방법으로서, 상기 카메라 장치의 영상취득부가 취득한 영상을 상기 데이터 처리 서버가 전달받아 분석하는 단계; 상기 분석 영상 내에서 골프클럽 및 볼 중 적어도 하나를 추출하여 인식하는 단계; 사용자가 골프 스윙을 함에 따라 골프클럽 헤드가 골프공을 타격하는 타격음을 감지하는 음향감지부에 의해 감지된 결과 정보를 상기 데이터 처리 서버가 전달받는 단계; 상기 골프클럽 및 볼 중 적어도 하나의 인식 결과 정보 및 상기 음향감지부의 감지 결과 정보 중 적어도 두 가지 정보를 이용하여 상기 영상취득부로부터 전달받은 영상에서 상기 사용자에게 제공할 영상을 추출하기 위한 기준시점을 결정하는 단계; 및 상기 영상취득부로부터 전달받은 영상에서 상기 결정된 기준시점을 기준으로 미리 설정된 구간에 해당하는 영상을 상기 사용자의 스윙 영상 정보로서 추출하는 단계를 포함한다.
본 발명에 따른 골프스윙영상 정보 제공 시스템, 골프스윙영상 정보 제공을 위한 카메라 장치 및 골프스윙영상 정보 제공방법은, 골프장에서 골프 라운드를 하는 사용자에게 골프스윙 영상 정보를 간편하고 안정적으로 제공하는데 적합한 시스템, 장치 및 방법을 제공하며, 사용자의 골프스윙에 대한 영상의 분석 결과를 이용하여, 또는 그 영상 분석 결과와 스윙시의 타격음 감지 결과를 이용하여, 취득된 영상에서 사용자의 스윙 영상을 상당히 일정하게 그리고 안정적으로 추출하여 제공할 수 있는 효과가 있다.
도 1은 본 발명의 일 실시예에 따른 골프스윙영상 정보 제공 시스템의 카메라 장치가 사용자의 골프스윙을 촬영하는 경우의 일 예를 나타낸 도면이다.
도 2는 본 발명의 일 실시예에 따른 골프스윙영상 정보 제공 시스템이 골프장의 특정 홀에 구현된 것의 일 예를 나타낸 도면이다.
도 3은 본 발명의 일 실시예에 따른 골프스윙영상 정보 제공 시스템의 구성을 나타낸 블록도이다.
도 4는 본 발명의 다른 일 실시예에 따른 골프스윙영상 정보 제공 시스템의 구성을 나타낸 블록도이다.
도 5는 본 발명의 일 실시예에 따른 골프스윙영상 정보 제공 방법에 관하여 설명하기 위한 플로우차트이다.
도 6은 도 5에 도시된 영상의 분석 및 기준시점의 결정에 관한 프로세스의 일 예를 더욱 상세하게 설명하기 위한 플로우차트이다.
도 7 및 도 8은 도 6에서 설명하는 골프클럽 인식 프로세스의 일 예를 구체적으로 설명하기 위한 도면들이다.
도 9, 도 10 및 도 11은 도 6에서 설명하는 볼 인식 프로세스의 일 예를 구체적으로 설명하기 위한 도면들이다.
본 발명에 따른 골프스윙영상 정보 제공 시스템, 골프스윙영상 정보 제공을 위한 카메라 장치 및 골프스윙영상 정보 제공방법에 관하여 도면을 참조하여 좀 더 구체적으로 설명한다.
먼저, 도 1 내지 도 3을 참조하여 본 발명의 일 실시예에 따른 골프스윙영상 정보 제공 시스템에 관하여 설명한다.
본 발명의 일 실시예에 따른 골프스윙영상 정보 제공 시스템은 주로 골프장에서 골프 라운드를 하는 사용자가 골프 라운드를 하는 과정에서 특정 홀 또는 매홀마다 티샷과 같은 특정 샷을 할 때의 골프스윙 모션에 대한 영상을 생성하여 사용자에게 제공하도록 한다.
도 1 내지 도 3에 도시된 바와 같이, 본 발명의 일 실시예에 따른 골프스윙영상 정보 제공 시스템은, 기본적으로 카메라 장치(100)와, 데이터 처리 서버(T)를 포함하여 구성될 수 있다.
상기 카메라 장치(100)는 사용자가 골프스윙을 하는 영역에 설치되어 사용자가 골프스윙을 할 때의 영상을 취득하는 카메라를 포함하는 장치이다. 그리고, 상기 데이터 처리 서버(T)는 상기 카메라 장치(100)가 취득하는 영상을 수집하고 분석하여 상기 카메라 장치(100)가 취득하는 영상에서 사용자의 골프스윙 영상 부분을 적절히 추출하여 사용자에게 제공할 수 있도록 데이터를 처리하는 장치이다.
도 1은 본 발명의 일 실시예에 따른 골프스윙영상 정보 제공 시스템의 카메라 장치(100)가 사용자의 골프스윙을 촬영하는 경우의 일 예를 나타내고 있다.
상기 카메라 장치(100)는 구조적으로 헤드부(H), 칼럼부(C), 지지대(R)의 구성으로 구성될 수 있고, 헤드부(H)에 영상취득부(110)와, 음향감지부(140) 등의 구성요소가 내설될 수 있으며, 사용자가 골프스윙을 하기 전에 카메라 장치(100)가 스윙 영상 분석 준비가 되었다는 것을 알람하기 위한 레디알람부(130)가 도 1에 도시된 바와 같이 구비될 수 있다.
상기 레디알람부(130)는 LED램프 등으로 준비가 안되었을 때는 빨간색으로, 준비가 되었을 때는 파란색으로 표시하여 시각적인 알람을 주거나, 스피커를 구비하여 "레디"와 같은 청각적 알람을 주도록 구성될 수 있다.
본 발명의 일 실시예에 따른 골프스윙영상 정보 제공 시스템의 카메라 장치(100)의 구조적 구성은 도 1에 도시된 것에 한정되지 않고 영상취득부, 음향감지부, 레디알람부 등의 구성요소를 포함할 수 있는 구조이면 여하한 형태의 구성이 가능하다.
상기 영상취득부(110)는 사용자의 스윙 모션을 촬영하는 단일의 카메라를 포함하도록 구성될 수도 있고, 스윙영상카메라와 분석영상카메라의 트윈 카메라 형태로 구성될 수도 있다.
어떤 형태이든, 상기 영상취득부(110)는 사용자(P)와 골프클럽(GC), 볼(BA)이 취득되는 영상 내에 충분히 포함될 수 있도록 적절한 범위의 화각으로 영상을 촬영하여 취득하도록 구성됨이 바람직하다.
상기한 바와 같이 카메라 장치(100)가 촬영하여 그 화각 내의 영상을 취득하면 그 취득된 영상 내에는 사용자(P)가 어드레스 자세를 취할 때부터 골프스윙을 완료하였을 때까지의 사용자의 골프스윙 영상을 포함하여 골프스윙을 하지 않는 경우의 영상까지 모두 포함되어 있다.
상기한 데이터 처리 서버(T)는 상기 카메라 장치(100)로부터 그 취득된 영상을 모두 가져와서 이를 분석하여 적절한 기준시점을 정하고 그 기준시점을 기준으로 소정의 범위에 해당하는 영상을 '사용자의 골프스윙 영상'으로서 추출하는 데이터 처리 프로세스를 진행한다. 이에 대한 구체적인 내용에 대해서는 후술하도록 한다.
한편, 도 2에서는 본 발명의 일 실시예에 따른 골프스윙영상 정보 제공 시스템이 골프장의 일 홀에 구현된 예를 나타낸 것이다.
일반적으로 골프장의 각 홀에는 여성 티 영역(Red Tee 또는 Lady Tee), 남성 티 영역(White Tee 또는 Man's Tee), 챔피언 티 영역(Champion Tee) 및 프로 티 영역(Professional Tee)이 마련되어 있다. 물론 각 티 영역 중 일부는 서로 중첩되기도 하고 일부 티 영역은 생략되는 경우도 있지만, 대체적으로 위 4가지 티 영역을 마련하고 있다.
도 2에 도시된 홀에서는 여성 티 영역(LT), 남성 티 영역(WT) 및 챔피언 티 영역(CT)이 마련되어 있는 경우를 나타내고 있다.
본 발명의 일 실시예에 따른 골프스윙영상 정보 제공 시스템은 각 티 영역마다 또는 복수의 티 영역 중 일부 티 영역에 각각 카메라 장치(100, 101, 102)를 설치하여 해당 티 영역에서 골프스윙하는 사용자가 여성이든 남성이든 세미프로이든 프로선수이든 모두 골프스윙 영상을 추출할 수 있도록 하는 시스템을 구축하고 있다.
각각의 카메라 장치(100, 101, 102)는 하나의 데이터 처리 서버(T)와 연결되고 각각의 카메라 장치가 취득하는 영상은 상기 데이터 처리 서버(T)로 보내어져 처리되어 메인 서버(S)로 저장됨으로써 사용자는 메인 서버(S)를 통해 자신의 스윙 영상을 제공받을 수 있다.
도 2에서 데이터 처리 서버(T)를 점선으로 표시한 것은, 상기 데이터 처리 서버(T)가 함체 내에 구비된 상태로 지중에 매설되어 구현될 수 있다는 것을 나타내기 위한 것이다. 물론 지상에 상기 함체가 구비되도록 구성하는 것도 가능하다.
이와 같은 본 발명의 일 실시예에 따른 골프스윙영상 정보 제공 시스템의 구체적인 구성은 도 3에 도시된 블록도에서 좀 더 구체적으로 나타내고 있다.
도 3에 도시된 바와 같이, 각 티 영역의 카메라 장치(100 등)는 AP장치(300)를 통해 데이터 처리 서버(T)와 연결되어 있는데, 각 카메라 장치(100 등)가 취득하는 영상 데이터를 데이터 처리 서버(T)로 고속 전송이 가능하도록 대용량 고속 전송이 가능한 유선 통신 방식으로 연결됨이 바람직하다.
상기 AP장치(300)는 Access Point로서 WiFi 등의 방식으로 데이터 처리 서버(T)가 메인 서버(S)와 무선 통신할 수 있도록 하는 수단이다.
각 카메라 장치(100 등)는 영상취득부(110), 전원부(120), 레디알람부(130) 및 음향감지부(140)를 동일하게 구비하여 구성될 수 있다.
상기 영상취득부(110)는 사용자의 스윙 모션을 촬영하는 단일의 카메라를 포함하도록 구성될 수도 있는데, 이때에는 단일의 카메라가 취득한 영상이 데이터 처리 서버(T)에서 분석되는데 이용되면서 동시에 그 분석 결과를 기초로 사용자의 스윙 영상을 그 취득한 영상에서 추출할 때에도 이용된다. 따라서 상기 영상취득부(110)로서의 단일의 카메라는 영상 분석을 함에도 충분할 정도의 해상도를 갖는 것이 바람직하다.
상기 영상취득부(110)가 스윙영상카메라와 분석영상카메라의 트윈 카메라 형태로 구성되는 경우에는, 상기 스윙영상카메라와 분석영상카메라가 각각 취득한 영상을 데이터 처리 서버(T)가 수집하였다가 영상을 분석할 때에는 상기 분석영상카메라가 취득한 영상을 이용하고 그 영상 분석의 결과에 따라 사용자에게 제공할 사용자 스윙 영상을 추출할 때에는 상기 스윙영상카메라에 의해 취득된 영상에서 해당 영상을 추출한다.
상기 데이터 처리 서버(T)는, 도 3에 도시된 바와 같이 영상수집부(T10), 영상분석부(T20) 및 데이터처리부(T30)를 포함하여 구성될 수 있다.
상기 영상수집부(T10)는 상기 영상취득부(110)에 의해 취득되는 영상을 실시간으로 전송받아 수집하는데, 추후 그 수집된 영상에서 '사용자 스윙 영상'을 추출하기 위해 수집하는 영상의 각 프레임마다 인덱스를 표시하여 수집하는 것이 바람직하다.
상기 영상분석부(T20)는 상기 영상수집부(T10)에서 수집한 각 프레임의 영상에 대해 차영상 분석을 통해 골프클럽 및 볼을 추출하고 연속되는 프레임의 영상에서 상기 추출된 골프클럽과 볼 각각의 거동 특성을 분석한다.
상기 데이터처리부(T30)는 상기 영상분석부(T20)의 분석 결과를 이용하여 상기 수집한 영상에서 상기 사용자에게 제공할 영상을 추출하기 위한 기준시점을 결정하며, 상기 영상수집부(T10)에 의해 수집된 영상에서 상기 결정된 기준시점을 기준으로 '사용자 스윙 영상' 정보를 추출하여 메인 서버(S)로 전송하는 기능을 수행한다.
상기한 바와 같이 데이터처리부(T30)가 영상분석부(T20)에 의해 영상 내에서 골프클럽과 볼에 대한 분석 결과를 이용하여 상기한 '기준시점'을 결정할 수도 있지만, 상기한 골프클럽과 볼에 대한 분석 결과와 함께 카메라 장치(100 등)에 구비된 음향감지부(140)의 타격음 감지 결과를 이용하여 상기한 '기준시점'을 결정하도록 구성되는 것이 더욱 안정적이고 일정한 품질의 영상 추출이라는 관점에서 더 바람직할 수 있다.
한편, 상기한 사용자의 스윙 영상 추출 및 제공에 관한 프로세스는 무선 캐디 단말기(400)에 의해 개시되고 추출된 사용자의 스윙 영상 정보가 관리될 수 있다.
상기 무선 캐디 단말기(400)는 소위 스마트폰이나 태블릿 PC 등의 형태로 구현될 수 있고, 골프장에서 골프 라운드를 하는 3 ~ 4명으로 구성되는 팀을 일괄 관리하기 위한 캐디 전용 단말기 등의 형태로 구현될 수도 있다.
상기 메인 서버(S)에는 골프 라운드를 하는 각 사용자들의 신상정보 또는 식별정보를 이미 저장하여 등록해 놓고 있는 것이 바람직하며, 상기 무선 캐디 단말기(400)에도 해당 골프 라운드를 하는 각 사용자들의 신상정보나 식별정보를 미리 저장해 놓거나 상기 메인 서버(S)로부터 전송받아 저장해 놓는 것이 바람직하다.
따라서, 어떤 홀에서 각 사용자들이 골프샷을 할 때, 캐디가 상기 무선 캐디 단말기(400)를 이용하여 메인 서버(S)로 현재 골프샷을 할 사용자에 대한 정보를 전송하면, 상기 메인 서버(S)는 해당 사용자에 대한 영상을 저장할 준비(예컨대, 해당 사용자에 대한 폴더를 생성하는 등)를 하고 데이터 처리 서버(T)로 신호를 보내면, 상기 데이터 처리 서버(T)는 상기 카메라 장치(100)에 영상 취득 개시 신호를 보낸다.
상기 데이터 처리 서버(T)의 영상 취득 개시 신호에 따라 상기 카메라 장치(100)는 레디알람부(130)를 통해 레디 상태임을 알리고 영상 취득을 개시하게 된다.
그리고, 상기 카메라 장치(100)가 취득하는 영상은 상기 데이터 처리 서버(T)의 영상수집부(T10)로 실시간으로 전송되어 저장되며, 앞서 설명한 바와 같은 영상 분석 및 데이터 처리가 진행된다.
한편, 도 4에서는 본 발명의 일 실시예에 따른 골프스윙영상 정보 제공을 위한 카메라 장치를 포함한 골프스윙영상 정보 제공 시스템에 관한 구성을 블록도로서 나타내고 있다.
도 3에 도시된 실시예에서는 카메라 장치와 데이터 처리 서버가 각각 별도로 구비되는 구성이었으나, 도 4에 도시된 실시예에서는 상기한 데이터 처리 서버에 관한 구성이 카메라 장치에 일체화되어 구현되는 경우를 나타내고 있다.
따라서, 도 4에 도시된 바와 같이 본 발명의 일 실시예에 따른 골프스윙영상 정보 제공을 위한 카메라 장치(200)는, 영상취득부(210), 전원부(220), 레디알람부(230), 음향감지부(240), 영상수집부(250), 영상분석부(260) 및 데이터처리부(270)를 모두 포함하여 구성된다.
본 실시예에 따른 시스템도 앞서 도 1 내지 도 3에서 설명한 시스템과 마찬가지로 골프장의 홀에 마련된 각 티 영역에 카메라 장치가 각각 구비될 수 있고 도 4의 201번 도면번호로 지칭하고 있는 카메라 장치는 200번 카메라 장치와 다른 티 영역에 설치된 카메라 장치를 나타내고 있으며, 그 구성은 200번 카메라 장치와 동일하거나 영상수집부(250), 영상분석부(260) 및 데이터처리부(270)의 구성을 포함하지 않은 형태로 구현될 수 있다 (이 경우에는 201번 카메라 장치가 취득한 영상 정보의 처리는 200번 카메라 장치에 구비된 영상수집부(250), 영상분석부(260) 및 데이터처리부(270)에 의해 이루어지도록 구성할 수 있다).
상기한 영상취득부(210), 전원부(220), 레디알람부(230), 음향감지부(240), 영상수집부(250), 영상분석부(260) 및 데이터처리부(270) 각각의 기능은, 도 3에 도시된 영상취득부(110), 전원부(120), 레디알람부(130), 음향감지부(140), 영상수집부(T10), 영상분석부(T20) 및 데이터처리부(T30)와 각각 실질적으로 동일하며, 이에 대해서는 이미 설명한 바 있으므로 구체적인 설명은 생략하도록 한다.
도 4에 도시된 AP장치(300), 무선 캐디 단말기(400) 및 메인 서버(S)에 관한 사항 역시 도 3에서 설명한 것과 동일하므로, 이에 대한 설명도 생략하도록 한다.
한편, 본 발명의 일 실시예에 따른 골프스윙영상 정보 제공 시스템에서 구현되는 골프스윙영상 정보 제공 방법에 관하여 도 5에 도시된 플로우차트를 통해 좀 더 구체적으로 설명하도록 한다. 도 5에 도시된 플로우차트는 도 3에 도시된 구성을 갖는 골프스윙영상 정보 제공 시스템에서 이루어지는 프로세스에 관한 것이다.
먼저, 골프장의 특정 홀에서 어떤 사용자가 티샷 등의 특정 샷을 할 경우, 캐디 또는 다른 사용자는 무선 캐디 단말기를 AP장치를 통해 메인 서버에 무선 통신 접속시킨다(예컨대, WiFi 연결) (S10).
그리고 상기 무선 캐디 단말기를 통해 골프스윙하는 사용자에 대한 정보를 메인 서버로 전송한다(S11).
골프장의 모든 홀 또는 여러 홀에 본 발명에 따른 골프스윙영상 제공 시스템의 카메라 장치 및 데이터 처리 서버가 설치되어 있는 경우, 메인 서버는 각각의 카메라 장치의 식별정보, 예컨대 해당 카메라 장치가 설치된 홀 및 해당 홀에서의 티 영역에 대한 정보 또는 각 카메라 장치 자체의 식별정보를 모두 저장하고 있는 것이 바람직하며, 상기 무선 캐디 단말기에도 상기한 식별정보가 저장되어 있는 것이 바람직하다.
따라서, 상기 S11 단계에서는 현재 골프스윙하는 사용자에 대한 정보 뿐만 아니라 해당 사용자가 이용하는 카메라 장치에 대한 식별정보(예컨대, 카메라 장치 자체의 식별정보일수도 있고 해당 카메라가 몇 번 홀인지, 해당 홀의 어느 티 영역인지에 대한 정보일 수도 있다)를 함께 메인 서버로 전송하도록 함이 바람직하다.
메인 서버는 상기 S11 단계에서 사용자에 대한 정보 등을 전송받으면, 해당 사용자를 검색하여(S20) 해당 사용자에 대한 스윙 영상 정보를 저장할 준비를 한다(S21). 만약 해당 사용자가 검색되지 않으면 메인 서버는 상기 무선 캐디 단말기를 통해 해당 사용자를 등록하고 해당 사용자에 대한 공유폴더 등을 생성함으로써 상기 S20 및 S21 단계를 진행한다.
상기 메인 서버는 데이터 처리 서버로 레디 신호를 전송하고(S23), 상기 데이터 처리 서버는 상기 메인 서버의 레디 신호를 받아 카메라 장치에 영상 취득 개시 신호를 전송한다(S30).
상기 카메라 장치는 상기 데이터 처리 서버로부터 영상 취득 개시 신호를 전송받아 레디알람부를 통해 사용자에게 영상 처리의 준비가 되었다는 것을 시각 및 청각 중 적어도 한 가지 방법으로 알람(이하 "레디알람"이라 한다)한다(S40).
여기서, 상기한 바와 같이 레디알람부가 영상 취득 개시 신호의 수신에 따라 곧바로 레디알람을 하도록 구성할 수도 있고, 상기 영상 취득 개시 신호의 수신에 따라 카메라 장치의 영상취득부가 영상을 취득하여 데이터 처리 서버로 전송하고 상기 데이터 처리 서버에서 영상을 분석하여 그 분석 영상상에서 볼 찾기가 완료되었을 때 비로소 상기 레디알람부가 레디알람을 하도록 구성할 수도 있다. 이에 대한 구체적인 설명은 후술하도록 한다.
한편, 데이터 처리 서버의 영상 취득 개시 신호에 따라 상기 카메라 장치의 영상취득부는 그 화각 내의 영상을 지속적으로 취득하기 시작하고(S41), 취득되는 영상을 지속적으로 데이터 처리 서버로 전송한다(S42).
상기 데이터 처리 서버는 상기 카메라 장치로부터 전송되는 영상을 수집하며(S31) (이때 수집하는 각 프레임마다 인덱스를 표시하도록 함이 바람직하다), 데이터 처리 서버의 영상분석부는 그 수집된 영상을 각 프레임마다 영상 분석한다(S32). 여기서 영상분석부에 의해 이루어지는 영상 분석의 구체적인 예는 후술하도록 한다.
상기 데이터 처리 서버의 데이터처리부는, 상기 S32 단계에서 진행된 영상 분석의 결과와 카메라 장치의 음향감지부에 의해 타격음이 감지(S43)된 결과를 전송받아 이들을 적절히 이용하여 상기 수집된 영상에서 '사용자 스윙 영상'을 추출하기 위한 기준시점을 결정한다(S33). 예컨대, 수집된 영상이 여러 프레임이므로 그 여러 프레임 중 기준시점에 해당하는 프레임이 어느 프레임인지 해당 프레임의 인덱스 정보를 결정한다.
상기 데이터 처리 서버의 데이터처리부는, 상기 S33에서 기준시점을 결정하고 상기 S31 단계에서 수집된 영상에서 상기 결정된 기준시점을 기준으로 영상을 추출한다(S34). 그 추출된 영상이 사용자에게 제공될 '사용자 스윙 영상'에 해당하는 영상이 되는 것이다.
상기 데이터 처리 서버는 AP장치를 통해 메인 서버로 상기 S34 단계에서 추출된 영상 정보를 전송하고(S35), 상기 메인 서버는 그 전송받은 영상 정보를 해당 사용자의 스윙 영상 정보로서 저장한다(S25). 공유폴더를 만들어 상기 사용자의 스윙 영상 정보를 복사해 놓는 것도 가능하다.
상기한 바와 같이 메인 서버가 해당 사용자의 공유폴더에 해당 사용자의 스윙 영상 정보를 저장해 놓으며, 무선 캐디 단말기는 해당 공유폴더에 접근하여 해당 사용자의 스윙 영상 정보를 실행하거나 해당 사용자의 모바일 단말기로 전송하는 등의 방식으로 해당 사용자에게 스윙 영상 정보를 제공하게 된다(S12).
한편, 도 6은 도 5에 도시된 영상 분석 단계(S32) 및 기준시점 결정 단계(S33)에 관한 일 예에 해당하는 프로세스를 좀 더 구체적으로 나타내고 있다.
도 3에 도시된 바와 같은 데이터 처리 서버의 영상수집부, 영상분석부 및 데이터처리부에 의해 수행되는 프로세스에 관하여 설명하고 있는데, 이는 도 4에 도시된 카메라 장치에 구비되는 영상수집부, 영상분석부 및 데이터처리부에서도 동일하게 수행될 수 있으며, 이하에서 별도로 언급이 없더라도 상기한 사항은 동일하게 적용된다.
도 6에 도시된 바와 같이, 카메라 장치의 영상취득부로부터 영상을 전송받아 수집하면서, 데이터 처리 서버의 영상분석부는 그 수집된 영상에서 볼 찾기를 진행할 수 있다(S100).
상기 S100 단계는, 영상취득부로부터 전송받은 초기 영상에서 상기한 볼 찾기가 수행되기 때문에 상기 볼 찾기 프로세스는 사용자가 볼을 놓고 어드레스 자세를 취할 때 쯤에 이루어진다.
상기 S100 단계는 실시예에 따라 수행될 수도 있고 수행되지 않을 수도 있으며, 볼 찾기를 성공하든 실패하든 다음 프로세스가 진행되며, 상기 볼 찾기 프로세스가 성공하면 이후의 기준시점 결정에 참고가 될 수 있으나 볼 찾기에 실패하더라도 여러 가지 다른 정보를 이용하여 기준시점을 결정할 수 있다.
상기 볼 찾기 프로세스는, 볼이 정지상태에 있기 때문에 두 영상 프레임 간의 차연산을 통해서는 검출할 수 없고, 취득된 영상 상에서 볼에 해당하는 크기, 둥근정도, 볼의 패턴, 픽셀 밝기 등의 팩터들을 이용하여 볼을 찾는 과정이 진행될 수도 있고 볼에 대한 참조 이미지로서 템플릿 이미지를 미리 저장해 놓았다가 취득된 영상에서 상기 템플릿 이미지와 유사도가 높은 것을 찾는 방식으로 볼 찾기가 진행될 수 있다.
한편, 데이터 처리 서버의 영상분석부가 분석하고자 하는 것은 수집된 각 프레임의 영상에서 골프클럽에 해당하는 부분과 볼에 해당하는 부분을 각각 추출하여 영상 상에서 골프클럽과 볼을 인식하고 골프클럽과 볼이 어떻게 움직이는지, 즉 거동 특성을 파악하는 것을 목적으로 한다.
이를 위해, 수집된 각 프레임의 영상에 대해 차영상 분석이 진행된다(S110). 즉, 시간적으로 연속하는 여러 프레임의 영상에 대해 특정 영상의 이전 영상과의 차연산을 통해 생성되는 영상에는 움직임이 있는 부분, 즉 골프클럽에 해당하는 부분과 볼이 타격된 이후 움직이는 볼에 해당하는 부분이 나타나므로, 골프클럽과 볼을 상기한 차영상 분석을 통해 효과적으로 추출할 수 있다.
여기서, 차영상 분석은 연속하는 두 프레임 사이의 차연산을 통해 생성한 영상을 이용하여 해당 영상 상에 나타나 있는 픽셀들을 분석할 수도 있고 상기 차영상에 대해 미리 설정된 픽셀값(밝기값)을 문턱값으로 하여 정규화한 영상을 생성하여 그 정규화한 영상 상에 나타나 있는 픽셀들을 분석할 수도 있다.
한편, 상기한 차영상 분석에 의해 영상에서 골프클럽을 추출하여 인식하는 프로세스와 영상에서 볼을 추출하여 인식하는 프로세스는 서로 다른 프로세스로서 멀티 쓰레딩(Multi-Threading) 방식으로 동시 각 프로세스가 진행되거나 상기 골프클럽 인식 프로세스와 볼 인식 프로세스가 순차적으로 진행될 수 있다.
도 6에 도시된 플로우차트에서, S121 ~ S123이 골프클럽 인식 프로세스를 나타내고, S141 ~ S143이 볼 인식 프로세스를 나타낸다.
먼저, 골프클럽 인식 프로세스에 대해 설명하면, 수집된 첫 영상(또는 임의의 영상)에서 '스윙판별 오브젝트'라는 것을 설정한다(S121). 상기 스윙판별 오브젝트는 다수의 미리 설정된 개수의 섹션을 갖는데, 영상에서 차영상 분석을 통해 골프클럽을 인식하면 그 인식된 골프클럽이 상기 설정된 스윙판별 오브젝트 상에서 어떻게 움직이는지 그 거동 특성을 파악하여 사용자가 골프스윙을 하는지 여부를 쉽게 판별할 수 있도록 해준다. 상기 스윙판별 오브젝트의 설정에 관한 구체적인 내용은 후술하도록 한다.
한편, 상기 S110 단계에서 차영상 분석된 영상 상에는 여러 픽셀들이 나타나는데, 픽셀들의 군집 상태나 분포 등을 파악하면 막대 형상으로 픽셀들이 몰려있는 부분이 존재하며 그 부분이 골프클럽에 해당하는 부분이며, 이를 더욱 명확하게 인식하기 위하여 그 픽셀들이 몰려있는 부분에 골프클럽에 해당하는 라인, 즉 클럽라인을 생성하여 표시함으로써 골프클럽을 인식할 수 있게 된다(S122). 클럽라인을 표시하면 그 끝 부분이 클럽 헤드 부분이 되어 클럽 헤드 부분까지도 인식이 가능하게 된다.
각 프레임 영상마다 상기한 바와 같이 클럽라인을 생성하면, 상기 S121 단계에서 설정된 스윙판별 오브젝트 상에서 상기 클럽라인이 발견되는 섹션의 수와 진행 방향을 판단할 수 있고 그로부터 사용자의 골프스윙 여부를 판별할 수 있다(S123). 이에 대한 구체적인 내용은 이후 도 7 및 8을 참조하여 설명하도록 한다.
한편, 볼 인식 프로세스에 대해 설명하면, 상기 수집된 각 프레임의 영상에서 미리 설정된 크기 및 위치에 해당하는 관심 영역을 추출한다(S141).
상기 추출된 관심 영역 내에서 프레임마다 위치 변화하는 오브젝트를 차영상 분석 등을 통해 추출할 수 있는데, 상기 프레임마다 위치 변화하는 오브젝트에 대해 각 프레임별로 해당 오브젝트의 수평면에 대한 높이각을 산출한다(S142).
그리고, 상기 산출된 각 프레임별 높이각을 이용하여 해당 오브젝트가 볼인지 여부를 판단함으로써 볼을 인식할 수 있다(S143).
이에 대한 구체적인 사항은 이후 도 10 및 도 11을 참조하여 설명하도록 한다.
상기한 바와 같이 수집된 영상에 대한 분석에 의해 각 프레임의 영상 상에서 골프클럽과 볼을 각각 인식하고 그 인식된 골프클럽과 볼의 거동 특성을 파악하게 되면, 그 분석 결과를 이용하여 상기 수집된 영상에서 '사용자 스윙 영상'을 추출하기 위한 기준시점을 결정할 수 있게 된다(S200).
즉, 골프클럽 인식 결과 사용자가 스윙을 하고 있고, 볼 인식 결과 관심 영역 내 볼이 나타났다면, 이는 십중팔구 사용자의 골프스윙에 의해 볼이 타격되어 볼이 날아가는 상황이므로, 상기 관심 영역에 상기 인식된 볼이 처음 등장할 때를 기준시점으로 결정할 수 있다. 좀 더 엄밀히 말하면 상기 관심 영역에 상기 인식된 볼이 처음 등장할 때 해당 프레임을 기준시점에서의 프레임으로 결정할 수 있다.
이와 같이 기준시점이 결정되면 그 결정된 기준시점에서의 프레임을 기준으로 그 이전의 미리 설정된 개수 또는 시간 구간의 프레임과 그 이후의 미리 설정된 개수 또는 시간 구간의 프레임을 각각 추출하여, 추출된 전체 연속된 프레임의 영상이 최종적으로 제공하고자 하는 사용자 스윙 영상이 되는 것이며, 해당 영상이 메인 서버로 전송되어 저장되는 것이다.
한편, 본 발명에 따른 골프스윙영상 정보 제공 방법은, 상기한 바와 같이 영상 분석을 통해 얻은 결과를 가지고 상기한 바와 같이 스윙 영상 추출을 위한 기준시점을 결정할 수도 있지만, 더욱 확실하고 안정적인 기준시점을 결정하기 위하여 카메라 장치에 구비된 음향감지부의 타격음 감지 결과를 함께 이용하여 스윙 영상 추출을 위한 기준시점을 결정할 수도 있다.
즉, 데이터 처리 서버의 데이터처리부는 영상 분석을 통해 골프클럽을 인식한 결과 정보, 영상 분석을 통해 볼을 인식한 결과 정보 및 음향감지부의 타격음 감지 결과 정보 중 적어도 두 가지 정보를 이용하여 스윙 영상 추출을 위한 기준시점을 결정할 수 있다(S200).
상기 S110, S121, S122 및 S123 등의 프로세스를 통해 영상에서 골프클럽을 인식함으로써 사용자가 골프스윙을 한 것인지 여부를 판별할 수 있을 뿐더러, 골프클럽의 인식을 통해 기준시점을 결정할 수도 있다.
이에 대해 좀 더 구체적으로 설명하면, 상기한 S100 단계에서 볼 찾기가 성공하였다면, 영상 상에서의 초기 볼의 위치 정보를 저장할 수 있다.
그리고, 스윙판별 오브젝트를 통해 골프클럽이 스윙 방향으로 진행되어 사용자가 골프스윙을 한 것으로 판별되는 경우, 상기 골프클럽에 해당하는 클럽라인의 끝 부분(헤드 부분)과 상기 저장된 초기 볼의 위치가 가장 근접할 때의 프레임을 특정할 수 있고 그 특정된 프레임을 기준시점에서의 프레임으로 결정할 수 있는 것이다.
만약, 상기한 S100 단계에서 볼 찾기가 실패하였다면, 골프클럽의 인식을 통해서는 상기한 기준시점을 곧바로 결정하지 않고 사용자가 골프스윙을 하였는지 여부만을 판별하는데 이용하는 것이 바람직하다.
한편, 볼의 인식을 통한 기준시점의 결정은 앞서 설명한 바 있는데, 영상 상에서 관심 영역을 추출하여 그 관심 영역 내에서 등장하는 오브젝트가 볼인 것을 확인하면 해당 오브젝트가 관심 영역에 처음 등장할 때의 프레임을 기준시점에서의 프레임으로 결정할 수 있다.
음향감지부의 타격음 감지 결과를 이용하는 경우에는, 타격음이 감지된 시점이 기준시점이 될 수 있다.
상기한 바와 같이, 골프클럽의 인식을 통해서도 기준시점을 결정할 수 있고, 볼의 인식을 통해서도 기준시점을 결정할 수 있으며, 음향감지부의 타격음 감지 결과를 통해서도 기준시점을 결정할 수 있다.
따라서, 데이터 처리 서버의 데이터처리부는 상기한 골프클럽을 인식한 결과 정보, 볼을 인식한 결과 정보 및 음향감지부의 타격음 감지 결과 정보 각각에 대해 우선 순위를 미리 설정해 놓고, 위 세가지 정보 중 적어도 두 가지 정보를 얻는데 성공하였다면 그 성공한 적어도 두 가지 정보 중에서 우선 순위가 높은 정보를 기초로 기준시점을 결정할 수 있다.
위 세가지 정보 중 한 가지 정보만 결과를 얻는 경우는 거의 없었으나, 이와 같은 경우를 대비하여 위 세가지 정보 중 두 가지 정보를 얻는데 실패한 경우, 나머지 한 가지 정보에 기초하여 기준시점을 결정하도록 본 발명을 구성하는 것도 물론 가능하다.
한편, 상기한 골프클럽 인식 프로세스에 관하여 좀 더 구체적인 내용을 도 7 및 도 8을 참조하여 설명하도록 한다.
도 7의 (a) 및 (b)는 영상취득부에 의해 취득되는 영상(10)을 각각 나타내며 해당 영상에서 도 6에서 설명한 바 있는 '스윙판별 오브젝트'를 설정하는 프로세스에 관하여 각각 나타내고 있다.
스윙판별 오브젝트(20)를 설정함에 있어, 스윙판별 오브젝트(20)의 크기와, 형상(예컨대, 원형, 타원형, 사각형 등) 및 이를 구성하는 각 섹션(S1 ~ S12)의 개수 등에 관한 사항은 데이터 처리 서버의 영상분석부가 미리 설정해 놓는 것이 바람직하다.
상기한 스윙판별 오브젝트(20)를 어디를 중심으로 하여 영상 상에 배치하도록 설정하는가에 따라 도 7의 (a)에 도시된 바와 같이 영상의 중심(Cd)에 스윙판별 오브젝트(20)의 중심이 위치하도록 배치하는 경우와, 도 7의 (b)에 도시된 바와 같이 영상에서 사용자(P10)를 인식하고 그 사용자(P10)의 무게중심점(Cw)을 찾아 그 무게중심점(Cw)에 스윙판별 오브젝트(20)의 중심이 위치하도록 배치하는 경우가 있다.
도 7의 (a) 및 (b)에 도시된 스윙판별 오브젝트(20)는 원형이며 12등분된 12개의 섹션이 존재하는 경우에 대해 나타내고 있다.
사용자가 골프샷을 할 때 카메라 장치를 의식하게 되면 그 화각 범위 내에서 골프스윙을 하려고 하기 때문에, 영상 내에서 사용자는 거의 중심부에 위치하여 스윙을 하게 되므로, 도 7의 (a)에 도시된 경우나 (b)에 도시된 경우나 거의 동일한 결과를 얻을 수 있다.
이와 같이 스윙판별 오브젝트(20)가 설정되면, 도 8에 도시된 바와 같이 영상수집부에 수집된 각 프레임의 영상에 대해 차영상 분석이 이루어진다.
도 8의 (a)는 영상취득부에 의해 취득되어 영상수집부로 전송된 원본 영상(10)을 나타내고, 도 8의 (b)는 도 8의 (a)의 영상 이전 프레임의 영상과의 차연산을 통해 생성된 차영상(11)을 나타내며, 도 8의 (c)는 도 8의 (b)에 나타낸 차영상(11)에 대해 미리 설정된 밝기값을 문턱값으로 하여 영상을 정규화하고 그 정규화된 영상에서의 픽셀 분포 등을 통해 클럽라인(CL)을 생성하여 나타낸 영상(12)이다.
도 8의 (a)에서 gc1으로 표시한 것은 실제 골프클럽을 나타내고 도 8의 (b)에서 gc2로 표시한 것은 차영상 상에서 나타난 골프클럽에 해당하는 부분을 나타내며, 도 8의 (c)에서 CL로 표시한 것은 상기 gc2 부분에 대해 클럽라인을 생성한 것을 나타내고 있다.
한편, 도 8의 (d)는 도 8의 (c)와 같이 생성된 영상에서의 클럽라인(CL)이 미리 설정된 스윙판별 오브젝트(20) 상에서 어떻게 움직이는지 판단하기 위한 영상을 나타낸다.
여러 프레임의 영상을 도 8의 (d)와 같은 상태로 보면, 클럽라인(CL)이 발견되는 섹션이 어느 섹션인지 확인할 수 있으며, 데이터처리부는 클럽라인이 발견되는 섹션의 수와 클럽라인이 진행하는 방향에 대해 미리 설정해 놓고, 영상 분석된 여러 프레임의 영상에서 클럽라인(CL)이 스윙판별 오브젝트(20) 상에서 발견되는 섹션의 수와 진행방향을 확인하여 미리 설정된 사항에 해당하는지를 판단하여 사용자가 골프스윙을 하는지 여부를 판별하게 된다.
여기서, 클럽라인(CL)이 스윙판별 오브젝트(20) 상에 진행방향은 백스윙의 진행방향이 아니라 다운스윙의 진행방향을 감지하는 것을 스윙 판별의 요건으로 미리 설정하는 것이 바람직하다.
예컨대, 스윙 판별의 요건으로서 3개의 섹션 및 반시계 방향을 미리 설정해 놓았다고 가정하면, 3개의 프레임 영상을 각각 차영상 분석하여 클럽라인(CL)을 생성하였는데 스윙판별 오브젝트(20) 상에서 섹션 S9, S8, S7에서 각각 클럽라인(CL)이 발견되었다면, 상기한 스윙 판별의 요건을 충족하므로 사용자의 골프스윙이 이루어진 것으로 판단할 수 있다.
한편, 도 8의 (a)에 도시된 영상(10)에서, 사용자(P10)는 백스윙을 시작한 상태이며 볼은 초기 위치에 놓여져 있는 상태이다. 여기서, 볼(ba1) 부분은 차영상을 통해서는 식별할 수 없으므로, 앞서 도 6을 통해 설명한 바 있듯이 별도의 볼 찾기 프로세스를 통해 인식할 수 있다.
만약, 볼 찾기를 성공하여 영상분석부가 볼(ba1)의 초기 위치를 특정할 수 있다면, 도 8의 (c)에 도시된 바와 같은 클럽라인(CL)의 생성을 통한 골프클럽의 인식으로 볼에 대한 임팩트 부근의 시점을 특정할 수 있으며, 이를 기준시점으로 결정할 수도 있다.
한편, 상기한 볼 인식 프로세스에 관하여 좀 더 구체적인 내용을 도 9 내지 도 11을 참조하여 설명하도록 한다.
도 9에 도시된 바와 같이, 볼의 경우에도 기본적으로 차영상 분석을 이용하여 인식할 수 있다.
물론, 영상 상에서 볼을 차영상 분석으로 인식하려면 볼이 타격에 의해 움직이고 있는 상태이어야 가능하며, 볼이 타격되기 이전에는 차영상으로 볼을 인식할 수 없고, 이때는 앞서 설명한 볼 찾기 프로세스를 통해 볼의 위치를 인식할 수 있다.
그러나, 앞서 설명한 볼 찾기 프로세스에 실패하더라도 이하에서 설명할 볼 인식 프로세스를 통해 얻은 결과를 이용하여 기준시점을 결정할 수 있다.
도 9의 (a)는 원본 영상(10)으로서 P10은 사용자를, gc1은 골프클럽을, ba1은 볼을 나타낸다. 이 원본 영상(10)에 대해 이전 프레임의 영상과의 차영상(11)을 구하면 움직이는 부분인 골프클럽 부분(gc2) 및 볼 부분(ba2)이 나타나게 된다.
여기서, 소정의 문턱값으로 정규화 영상(12)을 구하면 상기 골프클럽 부분(gc2) 및 볼 부분(ba2)이 더욱 명확하게 나타나며 골프클럽의 경우에는 클럽라인(CL)을 생성하여 골프클럽임을 나타내며 그 끝부분은 헤드 부분(HD)에 해당한다. 볼 부분(BD)도 더욱 명확하게 나타난다.
이와 같이 차영상 분석을 통해 골프클럽 부분과 볼 부분을 명확하게 추출할 수 있으며, 클럽라인(CL)에 연결되어 있는 부분은 헤드 부분(HD)으로 인식할 수 있고 이와 분리되어 있는 부분은 볼 부분(BD)으로 인식할 수 있다.
한편, 도 10에서는 영상에서 관심 영역의 설정을 통해 볼을 인식하는 프로세스에 대해 설명하고 있다.
도 10의 (a)에 도시된 바와 같이 영상 상에서 미리 설정된 크기와 형상의 관심 영역(ROI)을 추출하고 그 추출된 관심 영역을 분석하여 해당 관심 영역에 볼이 있는지 여부를 판단함으로써 기준시점 결정을 할 수 있다.
즉, 관심 영역 내에 볼이 있는지 확인을 하면 그 관심 영역으로 볼이 최초로 등장한 시점의 프레임을 기준시점의 프레임으로서 결정할 수 있다.
그런데, 관심 영역 내에 프레임마다 위치 변화를 하는 어떤 오브젝트가 나타나는 경우, 해당 오브젝트가 볼인지 클럽의 헤드 부분인지 구분하는 프로세스가 진행될 필요가 있다. 왜냐하면, 사람은 영상을 보면 해당 오브젝트가 볼인지 클럽헤드인지 알 수 있지만 컴퓨터는 이를 알 수 없기 때문에 이를 구별하는 프로세스를 별도로 진행하여야 하기 때문이다.
도 9의 (c)에 도시된 바와 같은 차영상 및 이에 대한 정규화 처리된 영상 상에서 상기한 바와 같은 관심 영역을 추출하면, 해당 관심 영역 내에 어떤 오브젝트가 존재하게 되고, 도 9의 (c)에서는 클럽라인(CL)과 헤드 부분(HD)이 명확히 인식되므로 클럽라인(CL)의 끝에 연결되어 있는지 여부를 판단함으로써 볼 부분(BD)을 구별할 수 있고, 관심 영역 내에서 볼 부분(BD)이 발견된다면 해당 프레임이 기준시점에서의 프레임이 될 수 있다.
그런데, 클럽라인의 생성이 실패하는 경우도 있고 클럽라인 부분과 클럽 헤드 부분이 분리되어 나타나는 경우 클럽 헤드 부분과 볼 부분이 관심 영역 내에 함께 존재하는 경우에는 어느 것이 볼인지 인식하기 위한 프로세스가 진행될 필요가 있다.
도 10의 (b), (c) 및 (d)는 각각 n 번째 프레임의 관심 영역, n+1 번째 프레임의 관심 영역, 그리고 n+2 번째 프레임의 관심 영역을 각각 추출하여 나타낸 것이다. 볼 인식을 위해서는 차영상 또는 차영상에 정규화 처리된 영상 상에서 관심 영역을 추출하여 이용하는 것이 바람직한데, 도 10의 (b), (c) 및 (d)에서는 볼 인식에 대한 설명에 대한 이해를 높이기 위해 원본 영상으로부터 추출한 관심 영역을 나타내고 있다 (차영상 등으로부터 Ob1 등의 오브젝트의 위치 정보를 알 수 있으므로 이를 이용하여 원본 영상으로부터 추출된 관심 영역으로도 분석이 가능함은 물론이다).
도 10의 (a) 내지 (d)에서 Oc1, Oc2, Oc3는 골프클럽의 헤드 부분에 해당하는 오브젝트이고, Ob1, Ob2, Ob3는 볼 부분에 해당하는 오브젝트이다. 본 발명의 데이터 처리 서버의 영상분석부는 관심 영역 내에 존재하는 위 Oc2, Oc3, Ob1 ~ Ob3 등의 여러 가지 오브젝트 중 어느 것이 볼인지 판단할 필요가 있다.
이에 대해서는, 도 11에 도시된 바와 같은 원리로 볼인지 여부를 판단할 수 있다.
도 11에서는 여러 프레임에 등장하는 오브젝트들을 하나로 통합하여 나타낸 것이다. 즉, Ob1 및 Oc1은 m 번째 프레임, Ob2 및 Oc2는 m+1 번째 프레임, Ob3 및 Oc3는 m+2 번째 프레임에 각각 존재하는 것인데, 볼을 구별하는 원리를 용이하게 설명하기 위하여 이들이 하나의 이미지에 있는 경우를 상정하여 나타낸 것이다.
실제로 골프스윙에 의해 골프클럽의 헤드가 볼을 타격하면, 볼의 움직임과 클럽헤드의 움직임은 서로 다른 특성을 보인다.
즉, 볼은 타격되면, 어느 일정한 거리까지는 직선 운동을 한다(특히 영상취득부의 화각 내에서의 움직임은 항상 직선 운동이다). 따라서 각 프레임별 오브젝트의 높이각(지면 또는 수평면으로부터의 높이각)을 각각 산출하면 거의 비슷한 값을 가지며 대체로 작은 값을 갖는 것이 특징이다.
즉, Ob1에서 Ob2로 가는 높이각 ab1, Ob2에서 Ob3로 가는 높이각 ab2, Ob3의 높이각 ab3 등이 거의 같은 값을 가지며 클럽헤드의 높이각에 비해 상대적으로 작은 값을 갖는다.
그러나, 클럽헤드의 경우, 곡선을 그리며 운동하기 때문에 각 프레임별 오브젝트의 높이각이 서로 다른 값을 가지며 높이각이 대체로 볼의 높이각 보다 더 큰 값을 갖는다. 즉, Oc1의 높이각 ac1, Oc2의 높이각 ac2, Oc3의 높이각 ac3는 각각 서로 다른 값을 갖게된다.
따라서, 오차범위를 미리 설정해 놓고 각 오브젝트(Oc2, Oc3, Ob1 ~ Ob3 등)의 높이각을 산출해서 그 미리 설정된 오차범위 내에서 서로 동일한 높이각 값을 갖는 오브젝트를 추출하면 그것이 볼이 되는 것이다.
볼이 추출되어 인식되면, 관심 영역 내에 인식된 볼이 최초로 등장한 프레임을 기준시점에서의 프레임으로 결정할 수 있다. 예컨대, 도 10에서 n 번째 프레임 영상에서 추출한 관심 영역 상에 Ob1이 등장하였고 n+1 번째 프레임, n+2 번째 프레임에서 각각 Oc2, Ob2 및 Oc3 및 Ob3가 등장 하였다면, 각각의 오브젝트의 높이각을 산출하고 미리 설정한 오차범위 내에서 서로 동일한 높이각을 갖는 오브젝트를 찾으면 그것이 볼인 것이다.
또는, 오차범위를 정하는 것이 아니라 높이각 값 자체의 범위를 정해놓고 그 높이각 값의 범위 내에 있으면 볼이고 그렇지 않으면 볼이 아닌 것으로 판단할 수도 있다.
볼의 높이각은 같은 종류의 샷이면 사람마다 크게 차이가 나지는 않으므로, 적절한 높이각 값의 범위를 미리 설정해 놓고 그 범위 내에서 높이각 값을 갖는 오브젝트를 찾아 이를 볼로 인식하는 것이 가능하며, 볼이 인식되면 관심 영역에 최초로 볼이 등장한 프레임이 어떤 프레임인지 알 수 있으며 해당 프레임의 인덱스 정보를 기준시점에서의 프레임 인덱스 정보로 저장하고 해당 프레임을 기준으로 이전 및 이후의 미리 설정된 개수의 프레임 또는 미리 설정된 시간 구간의 프레임을 추출하여 사용자의 스윙 영상 정보로서 결정할 수 있는 것이다.
이와 같이, 본 발명은 단순히 사용자가 볼을 타격할 때의 타격음만을 가지고 기준시점을 정하여 영상을 추출하지 않고 영상의 분석을 통한 골프클럽 인식, 볼의 인식, 음향감지를 모두 고려하여 상당히 안정적이고 일정한 기준시점을 결정하여 스윙 영상을 추출하기 때문에, 기준시점의 결정에 필요한 어떤 정보가 일부 문제가 발생하더라도 안정적이고 일정한 기준시점의 결정 및 이를 기준으로 한 스윙 영상의 추출이 가능하다는 장점이 있다.
[발명의 실시를 위한 최선의 형태] 항목에서 구체적으로 기재하고 있다.
본 발명에 따른 골프스윙영상 정보 제공 시스템, 골프스윙영상 정보 제공을 위한 카메라 장치 및 골프스윙영상 정보 제공방법은 골프장에서 골프 라운드를 하는 사용자에게 골프스윙 영상 정보를 간편하고 안정적으로 제공하는데 적합한 시스템, 장치 및 방법을 제공하므로 골프와 관련된 산업 분야에 이용 가능하다.

Claims (24)

  1. 촬영 영역 내에서 사용자가 골프 스윙을 하는 것에 대한 영상을 취득하는 영상취득부를 구비하는 적어도 하나의 카메라 장치; 및
    상기 영상취득부가 취득한 영상을 전달받아 그 전달받은 영상을 분석하여 상기 분석 영상 내에서 골프클럽 및 볼 중 적어도 하나를 인식하여 상기 전달받은 영상에서 상기 사용자에게 제공할 영상을 추출하기 위한 기준시점을 결정하며, 상기 영상취득부로부터 전달받은 영상에서 상기 결정된 기준시점을 기준으로 미리 설정된 구간에 해당하는 영상을 상기 사용자의 스윙 영상으로서 추출하는 데이터 처리 서버를 포함하여,
    상기 데이터 처리 서버에 의해 추출된 상기 사용자의 스윙 영상 정보를 상기 사용자에게 제공하는 골프스윙영상 정보 제공 시스템.
  2. 촬영 영역 내에서 사용자가 골프 스윙을 하는 것에 대한 영상을 취득하는 영상취득부와, 사용자가 골프 스윙을 함에 따라 골프클럽 헤드가 골프공을 타격하는 타격음을 감지하는 음향감지부를 포함하는 적어도 하나의 카메라 장치; 및
    상기 영상취득부가 취득한 영상을 전달받아 그 전달받은 영상을 분석하여 상기 분석 영상 내에서 골프클럽 및 볼 중 적어도 하나를 인식한 결과 정보 및 상기 음향감지부의 감지 결과 정보 중 두 가지 정보를 이용하여 상기 전달받은 영상에서 상기 사용자에게 제공할 영상을 추출하기 위한 기준시점을 결정하며,
    상기 영상취득부로부터 전달받은 영상에서 상기 결정된 기준시점을 기준으로 미리 설정된 구간에 해당하는 영상을 상기 사용자의 스윙 영상으로서 추출하는 데이터 처리 서버를 포함하여,
    상기 데이터 처리 서버에 의해 추출된 상기 사용자의 스윙 영상 정보를 상기 사용자에게 제공하는 골프스윙영상 정보 제공 시스템.
  3. 제1항 또는 제2항에 있어서,
    상기 카메라 장치에 구비되는 영상취득부는, 그 취득된 영상을 이용하여 상기 제어장치에서 상기 사용자의 스윙 영상 추출 및 스윙 영상 분석을 모두 수행할 수 있도록 하는 단일의 카메라인 것을 특징으로 하는 골프스윙영상 정보 제공 시스템.
  4. 제1항 또는 제2항에 있어서,
    상기 카메라 장치에 구비되는 영상취득부는,
    촬영 영역 내에서 사용자가 골프 스윙을 하는 것에 대한 영상을 취득하는 스윙영상카메라와,
    상기 사용자의 골프 스윙을 분석하기 위하여 영상을 취득하는 분석영상카메라를 포함하는 것을 특징으로 하는 골프스윙영상 정보 제공 시스템.
  5. 제1항에 있어서, 상기 데이터 처리 서버는,
    상기 영상취득부에 의해 취득되는 영상을 수집하는 영상수집부와,
    상기 영상수집부에서 수집한 각 프레임의 영상에 대해 차영상 분석을 통해 골프클럽과 볼 중 적어도 하나를 추출하고 연속되는 프레임의 영상에서 상기 추출된 골프클럽과 볼 중 적어도 하나의 거동 특성을 분석하는 영상분석부와,
    상기 영상분석부의 분석 결과를 이용하여 상기 수집한 영상에서 상기 사용자에게 제공할 영상을 추출하기 위한 기준시점을 결정하며, 상기 영상수집부에 의해 수집된 영상에서 상기 결정된 기준시점 이전의 미리 설정된 시간 및 이후의 미리 설정된 시간 중 적어도 하나의 시간 구간에 해당하는 영상, 또는 상기 결정된 기준시점 이전의 미리 설정된 개수의 프레임 및 이후의 미리 설정된 개수의 프레임 중 적어도 하나의 프레임 구간에 해당하는 영상을 상기 사용자의 스윙 영상으로서 추출하는 데이터처리부를 포함하는 것을 특징으로 하는 골프스윙영상 정보 제공 시스템.
  6. 제2항에 있어서, 상기 데이터 처리 서버는,
    상기 영상취득부에 의해 취득되는 영상을 수집하는 영상수집부와,
    상기 영상수집부에서 수집한 각 프레임의 영상에 대해 차영상 분석을 통해 골프클럽과 볼을 추출하고 연속되는 프레임의 영상에서 상기 추출된 골프클럽과 볼의 거동 특성을 분석하는 영상분석부와,
    상기 음향감지부의 감지 결과에 대한 정보를 전달받으며,
    상기 골프클럽의 거동 특성, 상기 볼의 거동 특성 및 상기 음향감지부의 감지 결과 정보 중 적어도 두 가지 정보를 이용하여 상기 수집한 영상에서 상기 사용자에게 제공할 영상을 추출하기 위한 기준시점을 결정하며,
    상기 영상수집부에 의해 수집된 영상에서 상기 결정된 기준시점 이전의 미리 설정된 시간 및 이후의 미리 설정된 시간 중 적어도 하나의 시간 구간에 해당하는 영상, 또는 상기 결정된 기준시점 이전의 미리 설정된 개수의 프레임 및 이후의 미리 설정된 개수의 프레임 중 적어도 하나의 프레임 구간에 해당하는 영상을 상기 사용자의 스윙 영상으로서 추출하는 데이터처리부를 포함하는 것을 특징으로 하는 골프스윙영상 정보 제공 시스템.
  7. 제1항 또는 제2항에 있어서, 상기 카메라 장치는,
    상기 사용자에게 스윙 영상 분석 준비가 되었다는 것을 시각 및 청각적 방법 중 적어도 한 가지 방법으로 알람하기 위한 레디 알람부를 더 포함하는 것을 특징으로 하는 골프스윙영상 정보 제공 시스템.
  8. 제1항 또는 제2항에 있어서,
    상기 카메라 장치는 골프장의 홀에서 여성 티 영역, 남성 티 영역, 챔피언 티 영역, 프로 티 영역 중 적어도 둘 이상의 티 영역에 각각 설치되고,
    상기 데이터 처리 서버는 상기 적어도 둘 이상의 티 영역에 각각 설치된 카메라 장치와 AP 장치에 의해 연결되며,
    상기 데이터 처리 서버는 상기 AP 장치를 통해 메인 서버와 무선 통신하도록 구성되어,
    상기 데이터 처리 서버가 추출한 상기 사용자의 스윙 영상에 관한 데이터를 상기 메인 서버에 무선 전송하고, 상기 메인 서버는 상기 무선 전송받은 사용자의 스윙 영상에 관한 데이터를 저장하여 상기 AP 장치를 통해 상기 사용자 측의 무선 캐디 단말기 또는 각 사용자의 모바일 단말기를 통해 제공될 수 있도록 한 것을 특징으로 하는 골프스윙영상 정보 제공 시스템.
  9. 촬영 영역 내에서 사용자가 골프 스윙을 하는 것에 대한 영상을 취득하는 영상취득부;
    상기 영상취득부에 의해 취득되는 영상을 수집하는 영상수집부;
    상기 영상수집부에서 수집한 각 프레임의 영상을 분석하여 골프클럽과 볼 중 적어도 하나를 추출하고 연속되는 프레임의 영상에서 상기 추출된 골프클럽과 볼 중 적어도 하나의 거동 특성을 분석하는 영상분석부; 및
    상기 영상분석부의 분석 결과를 이용하여 상기 수집한 영상에서 상기 사용자에게 제공할 영상을 추출하기 위한 기준시점을 결정하며, 상기 영상취득부로부터 전달받은 영상에서 상기 결정된 기준시점을 기준으로 미리 설정된 구간에 해당하는 영상을 상기 사용자의 스윙 영상으로서 추출하는 데이터처리부를 포함하여,
    상기 데이터 처리부에 의해 추출된 상기 사용자의 스윙 영상 정보를 상기 사용자에게 제공하는 골프스윙영상 정보 제공을 위한 카메라 장치.
  10. 촬영 영역 내에서 사용자가 골프 스윙을 하는 것에 대한 영상을 취득하는 영상취득부;
    사용자가 골프 스윙을 함에 따라 골프클럽 헤드가 골프공을 타격하는 타격음을 감지하는 음향감지부;
    상기 영상취득부에 의해 취득되는 영상을 수집하는 영상수집부;
    상기 영상수집부에서 수집한 각 프레임의 영상을 분석하여 골프클럽과 볼 중 적어도 하나를 추출하고 연속되는 프레임의 영상에서 상기 추출된 골프클럽과 볼 중 적어도 하나의 거동 특성을 분석하는 영상분석부; 및
    상기 음향감지부의 감지 결과에 대한 정보를 전달받으며, 상기 영상분석부의 분석 결과 및 상기 음향감지부의 감지 결과를 이용하여 상기 수집한 영상에서 상기 사용자에게 제공할 영상을 추출하기 위한 기준시점을 결정하고, 상기 영상취득부로부터 전달받은 영상에서 상기 결정된 기준시점을 기준으로 미리 설정된 구간에 해당하는 영상을 상기 사용자의 스윙 영상으로서 추출하는 데이터처리부를 포함하여,
    상기 데이터 처리부에 의해 추출된 상기 사용자의 스윙 영상 정보를 상기 사용자에게 제공하는 골프스윙영상 정보 제공을 위한 카메라 장치.
  11. 제9항 또는 제10항에 있어서,
    상기 영상분석부는,
    상기 영상수집부에 수집된 각 프레임 영상에 대해 차영상 분석을 통해 골프클럽을 추출하여 인식하고 상기 인식된 골프클럽의 거동 특성을 분석하며, 상기 각 프레임 영상 상에서 미리 설정된 관심 영역을 추출하여 상기 추출된 관심 영역 상에서 프레임마다 위치 변화를 하는 오브젝트에 대해 볼인지 여부를 판단함으로써 볼을 인식하도록 구성되며,
    상기 데이터 처리부는,
    상기 인식된 골프클럽의 거동 특성 분석 결과로부터 상기 사용자의 골프스윙 여부를 판별하며, 상기 사용자가 골프스윙을 한 것으로 판별한 경우 및 상기 추출된 관심 영역 상에서 프레임마다 위치 변화를 하는 오브젝트를 볼로서 인식한 경우, 상기 인식된 볼이 상기 관심 영역 상에 최초로 나타난 프레임을 상기 기준시점에서의 프레임으로서 결정하도록 구성되는 것을 특징으로 하는 골프스윙영상 정보 제공을 위한 카메라 장치.
  12. 제10항에 있어서, 상기 데이터 처리부는,
    상기 영상분석부의 분석에 의한 상기 골프클럽의 인식 결과 정보, 상기 볼의 인식 결과 정보 및 상기 음향감지부의 감지 결과 정보 각각에 대해 우선 순위를 미리 설정해 놓고,
    상기 골프클럽의 인식 결과 정보, 상기 볼의 인식 결과 정보 및 상기 음향감지부의 감지 결과 정보 중 적어도 두 가지 정보를 획득한 경우에 그 획득한 정보들에 대해 미리 설정된 우선 순위에 따라 우선인 정보를 기초로 상기 기준시점을 결정하도록 구성되는 것을 특징으로 하는 골프스윙영상 정보 제공을 위한 카메라 장치.
  13. 적어도 하나의 카메라 장치 및 이와 연결되어 상기 카메라 장치가 취득한 영상으로부터 사용자의 스윙 영상 정보를 추출하여 사용자에게 제공하는 데이터 처리 서버를 포함하는 골프스윙영상 정보 제공 시스템에 의한 골프스윙영상 정보 제공 방법으로서,
    상기 카메라 장치의 영상취득부가 취득한 영상을 상기 데이터 처리 서버가 전달받아 분석하는 단계;
    상기 분석 영상 내에서 골프클럽 및 볼 중 적어도 하나를 추출하여 인식하는 단계;
    상기 골프클럽 및 볼 중 적어도 하나의 인식 결과 정보를 이용하여 상기 영상취득부로부터 전달받은 영상에서 상기 사용자에게 제공할 영상을 추출하기 위한 기준시점을 결정하는 단계; 및
    상기 영상취득부로부터 전달받은 영상에서 상기 결정된 기준시점을 기준으로 미리 설정된 구간에 해당하는 영상을 상기 사용자의 스윙 영상 정보로서 추출하는 단계;
    를 포함하는 골프스윙영상 정보 제공 방법.
  14. 적어도 하나의 카메라 장치 및 이와 연결되어 상기 카메라 장치가 취득한 영상으로부터 사용자의 스윙 영상 정보를 추출하여 사용자에게 제공하는 데이터 처리 서버를 포함하는 골프스윙영상 정보 제공 시스템에 의한 골프스윙영상 정보 제공 방법으로서,
    상기 카메라 장치의 영상취득부가 취득한 영상을 상기 데이터 처리 서버가 전달받아 분석하는 단계;
    상기 분석 영상 내에서 골프클럽 및 볼 중 적어도 하나를 추출하여 인식하는 단계;
    사용자가 골프 스윙을 함에 따라 골프클럽 헤드가 골프공을 타격하는 타격음을 감지하는 음향감지부에 의해 감지된 결과 정보를 상기 데이터 처리 서버가 전달받는 단계;
    상기 골프클럽 및 볼 중 적어도 하나의 인식 결과 정보 및 상기 음향감지부의 감지 결과 정보 중 적어도 두 가지 정보를 이용하여 상기 영상취득부로부터 전달받은 영상에서 상기 사용자에게 제공할 영상을 추출하기 위한 기준시점을 결정하는 단계; 및
    상기 영상취득부로부터 전달받은 영상에서 상기 결정된 기준시점을 기준으로 미리 설정된 구간에 해당하는 영상을 상기 사용자의 스윙 영상 정보로서 추출하는 단계;
    를 포함하는 골프스윙영상 정보 제공 방법.
  15. 제13항 또는 제14항에 있어서,
    무선 캐디 단말기로부터 골프 스윙하는 사용자에 대한 정보를 메인 서버로 전송하는 단계와,
    상기 데이터 처리 서버가 상기 메인 서버로부터 응답을 수신함에 따라 상기 카메라 장치에 영상 취득 개시 신호를 보내는 단계와,
    상기 영상 취득 개시 신호에 따라 상기 카메라 장치에 구비된 레디 알람부가 스윙 영상 분석 준비가 되었음을 알람하는 단계를 더 포함하는 것을 특징으로 하는 골프스윙영상 정보 제공 방법.
  16. 제13항 또는 제14항에 있어서, 상기 골프클럽 및 볼 중 적어도 하나를 추출하여 인식하는 단계는,
    상기 영상취득부로부터 전달받은 각 프레임의 영상에 대해 이전 영상의 차영상 분석을 통해 골프클럽에 해당하는 클럽라인을 생성하는 단계를 포함하는 것을 특징으로 하는 골프스윙영상 정보 제공 방법.
  17. 제16항에 있어서, 상기 기준시점을 결정하는 단계는,
    상기 생성된 각 프레임 영상상에서 상기 생성한 클럽라인의 거동 특성을 분석하여 상기 사용자의 골프스윙 여부를 판별하는 단계와,
    상기 클럽라인의 거동 특성 분석 결과 상기 사용자가 골프스윙을 한 것으로 판별한 경우, 상기 볼을 추출하여 인식한 결과를 이용하여 상기 기준시점을 결정하는 단계를 포함하는 것을 특징으로 하는 골프스윙영상 정보 제공 방법.
  18. 제17항에 있어서, 상기 사용자의 골프스윙 여부를 판별하는 단계는,
    상기 영상상의 미리 설정된 위치에 미리 설정된 크기와 형상의 도형으로서 미리 설정된 개수의 섹션을 포함하는 스윙판별 오브젝트를 설정하는 단계와,
    상기 스윙판결 오브젝트 상에서 상기 생성한 클럽라인이 발견되는 섹션의 수와 진행 방향을 감지하여 미리 설정된 요건에 해당하는지 판단함으로써 상기 사용자의 골프스윙 여부를 판별하는 단계를 포함하는 것을 특징으로 하는 골프스윙영상 정보 제공 방법.
  19. 제13항 또는 제14항에 있어서, 상기 골프클럽 및 볼 중 적어도 하나를 추출하여 인식하는 단계는,
    상기 영상취득부로부터 전달받은 각 프레임의 영상 상에서 미리 설정된 관심 영역을 추출하는 단계와,
    상기 추출된 관심 영역 상에서 프레임마다 위치 변화를 하는 오브젝트에 대해 볼인지 여부를 판단함으로써 볼을 인식하는 단계를 포함하는 것을 특징으로 하는 골프스윙영상 정보 제공 방법.
  20. 제19항에 있어서, 상기 볼을 인식하는 단계는,
    상기 추출된 관심 영역 상에서 프레임마다 위치 변화를 하는 오브젝트의 각 프레임별 높이각을 산출하는 단계와,
    상기 산출된 각 프레임별 높이각이 미리 설정된 범위 내에 있는지 판단하여 미리 설정된 범위 내에 있는 경우에 해당 오브젝트를 볼로서 인식하는 단계를 포함하는 것을 특징으로 하는 골프스윙영상 정보 제공 방법.
  21. 제19항에 있어서, 상기 기준시점을 결정하는 단계는,
    상기 추출된 관심 영역 상에서 프레임마다 위치 변화를 하는 오브젝트를 볼로서 인식한 경우, 상기 인식된 볼이 상기 관심 영역 상에 최초로 나타난 프레임을 상기 기준시점에서의 프레임으로서 결정하는 단계를 포함하는 것을 특징으로 하는 골프스윙영상 정보 제공 방법.
  22. 제14항에 있어서, 상기 기준시점을 결정하는 단계는,
    상기 골프클럽의 인식 결과 정보, 상기 볼의 인식 결과 정보 및 상기 음향감지부의 감지 결과 정보 각각에 대해 우선 순위를 미리 설정해 놓고,
    상기 골프클럽의 인식 결과 정보, 상기 볼의 인식 결과 정보 및 상기 음향감지부의 감지 결과 정보 중 적어도 두 가지 정보를 획득한 경우에 그 획득한 정보들에 대해 미리 설정된 우선 순위에 따라 우선인 정보를 기초로 상기 기준시점을 결정하는 단계를 포함하는 것을 특징으로 하는 골프스윙영상 정보 제공 방법.
  23. 제14항에 있어서, 상기 기준시점을 결정하는 단계는,
    각 프레임의 영상으로부터 인식된 골프클럽의 거동 특성을 분석하여 상기 사용자의 골프스윙 여부를 판별하는 단계와,
    상기 클럽라인의 거동 특성 분석 결과 상기 사용자가 골프스윙을 한 것으로 판별한 경우, 상기 음향감지부가 타격음을 감지한 시점을 상기 기준시점으로서 결정하는 단계를 포함하는 것을 특징으로 하는 골프스윙영상 정보 제공 방법.
  24. 제14항에 있어서,
    상기 골프클럽 및 볼 중 적어도 하나를 추출하여 인식하는 단계는,
    상기 영상취득부로부터 전달받은 각 프레임의 영상 상에서 미리 설정된 관심 영역을 추출하는 단계와, 상기 추출된 관심 영역 상에서 프레임마다 위치 변화를 하는 오브젝트에 대해 볼인지 여부를 판단함으로써 볼을 인식하는 단계를 포함하고,
    상기 기준시점을 결정하는 단계는,
    상기 추출된 관심 영역 상에서 프레임마다 위치 변화를 하는 오브젝트를 볼로서 인식하고, 상기 음향감지부가 타격음을 감지한 경우, 상기 인식된 볼이 상기 관심 영역 상에 최초로 나타난 프레임을 상기 기준시점에서의 프레임으로서 결정하는 단계를 포함하는 것을 특징으로 하는 골프스윙영상 정보 제공 방법.
PCT/KR2016/007390 2015-08-12 2016-07-07 골프스윙영상 정보 제공 시스템, 골프스윙영상 정보 제공을 위한 카메라 장치 및 골프스윙영상 정보 제공방법 WO2017026664A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018505422A JP6555699B2 (ja) 2015-08-12 2016-07-07 ゴルフスイング映像情報提供システム、ゴルフスイング映像情報提供のためのカメラ装置及びゴルフスイング映像情報提供方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2015-0113622 2015-08-12
KR1020150113622A KR101703858B1 (ko) 2015-08-12 2015-08-12 골프스윙영상 정보 제공 시스템, 골프스윙영상 정보 제공을 위한 카메라 장치 및 골프스윙영상 정보 제공방법

Publications (1)

Publication Number Publication Date
WO2017026664A1 true WO2017026664A1 (ko) 2017-02-16

Family

ID=57983228

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/007390 WO2017026664A1 (ko) 2015-08-12 2016-07-07 골프스윙영상 정보 제공 시스템, 골프스윙영상 정보 제공을 위한 카메라 장치 및 골프스윙영상 정보 제공방법

Country Status (4)

Country Link
JP (1) JP6555699B2 (ko)
KR (1) KR101703858B1 (ko)
CN (1) CN106422272B (ko)
WO (1) WO2017026664A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020023522A1 (en) * 2018-07-23 2020-01-30 Golf Cloud, Inc. System for analyzing golf swing and/or golf ball flight path

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220039145A (ko) * 2020-09-22 2022-03-29 엄순분 골프 스윙 셀프 교정 시스템
KR102449722B1 (ko) * 2020-10-23 2022-10-04 (주)브레인키즈 골프 스윙궤도 추적 방법 및 장치
CN114534224A (zh) * 2022-01-13 2022-05-27 上海凯视力成科技有限公司 高尔夫挥杆智能镜
KR20230127778A (ko) 2022-02-25 2023-09-01 주식회사 카카오브이엑스 동작센서 기반의 스마트 골프장 라운드 정보 제공 시스템
WO2023177274A1 (ko) * 2022-03-18 2023-09-21 주식회사 마인스소프트 경기장 통합 운영 관리 시스템 및 통합 운영 관리 방법
KR20230165939A (ko) 2022-05-26 2023-12-06 주식회사 카카오브이엑스 증강현실 기반의 스마트 골프장 라운드 정보 제공 시스템

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07212747A (ja) * 1994-01-14 1995-08-11 Hochiki Corp 監視カメラ装置
JP2004248725A (ja) * 2003-02-18 2004-09-09 National Institute Of Advanced Industrial & Technology 打球の解析装置及び方法
KR101048090B1 (ko) * 2011-03-22 2011-07-08 (주) 골프존 가상 골프 시뮬레이션 장치와, 이에 이용되는 센싱장치 및 센싱방법
JP2013138742A (ja) * 2011-12-29 2013-07-18 Dunlop Sports Co Ltd ゴルフスイングの診断方法
KR101356595B1 (ko) * 2013-01-17 2014-02-04 (주) 골프존 골프장에 구현되는 골프스윙영상 정보 제공 시스템과 이에 이용되는 골프스윙영상 처리장치 및 골프스윙영상 정보 제공방법
KR20140137789A (ko) * 2013-05-24 2014-12-03 (주) 골프존 골프 스윙에 대한 정보제공을 위한 골프 연습 시스템 및 이를 이용한 골프 스윙에 대한 정보 처리방법

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9623284B2 (en) * 2008-02-20 2017-04-18 Karsten Manufacturing Corporation Systems and methods for storing and analyzing golf data, including community and individual golf data collection and storage at a central hub
JP5526727B2 (ja) * 2009-11-20 2014-06-18 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
KR20140037896A (ko) * 2011-06-27 2014-03-27 챤?헝 스포츠 모션 비디오 분석 방법
US8982216B2 (en) * 2011-11-04 2015-03-17 Nike, Inc. Portable movement capture device and method of finite element analysis

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07212747A (ja) * 1994-01-14 1995-08-11 Hochiki Corp 監視カメラ装置
JP2004248725A (ja) * 2003-02-18 2004-09-09 National Institute Of Advanced Industrial & Technology 打球の解析装置及び方法
KR101048090B1 (ko) * 2011-03-22 2011-07-08 (주) 골프존 가상 골프 시뮬레이션 장치와, 이에 이용되는 센싱장치 및 센싱방법
JP2013138742A (ja) * 2011-12-29 2013-07-18 Dunlop Sports Co Ltd ゴルフスイングの診断方法
KR101356595B1 (ko) * 2013-01-17 2014-02-04 (주) 골프존 골프장에 구현되는 골프스윙영상 정보 제공 시스템과 이에 이용되는 골프스윙영상 처리장치 및 골프스윙영상 정보 제공방법
KR20140137789A (ko) * 2013-05-24 2014-12-03 (주) 골프존 골프 스윙에 대한 정보제공을 위한 골프 연습 시스템 및 이를 이용한 골프 스윙에 대한 정보 처리방법

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
CHUN, SUNGKUK ET AL.: "A Sensor-Aided Self Coaching Model for Uncocking Improvement In Golf Swing", SPRINGER SCIENCE +BUSINESS MEDIA NEW YORK 2013, 24 January 2013 (2013-01-24), pages 253 - 279, XP055363472 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020023522A1 (en) * 2018-07-23 2020-01-30 Golf Cloud, Inc. System for analyzing golf swing and/or golf ball flight path
US10932697B2 (en) 2018-07-23 2021-03-02 Golf Cloud, Inc. System for analyzing a golf swing and/or golf ball flight path

Also Published As

Publication number Publication date
CN106422272A (zh) 2017-02-22
JP2018530362A (ja) 2018-10-18
JP6555699B2 (ja) 2019-08-07
KR101703858B1 (ko) 2017-02-22
CN106422272B (zh) 2019-04-12

Similar Documents

Publication Publication Date Title
WO2017026664A1 (ko) 골프스윙영상 정보 제공 시스템, 골프스윙영상 정보 제공을 위한 카메라 장치 및 골프스윙영상 정보 제공방법
WO2012128568A2 (ko) 가상 골프 시뮬레이션 장치와, 이에 이용되는 센싱장치 및 센싱방법
JP4494837B2 (ja) ゴルフスウィング診断システム
JP5881136B2 (ja) 情報処理装置及び方法、並びにプログラム
WO2016129917A1 (ko) 사용자 단말 및 이의 제공 방법
WO2017204596A1 (ko) 얼굴 윤곽 보정 방법 및 장치
US10070046B2 (en) Information processing device, recording medium, and information processing method
WO2011002225A2 (en) Golf simulation apparatus and method for the same
JP5004845B2 (ja) 監視端末装置およびその表示処理方法，プログラム，メモリ
WO2018146938A1 (ja) 人物検出システム
WO2021162313A1 (ko) 골프공에 대한 크랙 판별장치 및 방법
KR20140145569A (ko) 화상 처리 장치, 화상 처리 방법 및 기록 매체
WO2013022214A2 (ko) 운동동작 분석 장치 및 운동동작 분석 방법
WO2014189315A1 (ko) 골프 스윙에 대한 정보제공을 위한 골프 연습 시스템, 서버 및 이를 이용한 골프 스윙에 대한 정보 처리방법
JP2013236659A (ja) 解析システムおよびその解析方法
JP2009034360A (ja) トレーニングシステムおよびトレーニングシステム用装置
WO2018097612A1 (ko) 사용자의 골프샷에 대한 정보를 산출하기 위한 센싱장치 및 이를 이용한 센싱방법
KR101705836B1 (ko) 깊이 정보를 이용한 골프 스윙 분석 시스템 및 방법
WO2016036112A1 (ko) 동영상 분석기능을 갖는 모바일 단말기
JP2004248725A (ja) 打球の解析装置及び方法
KR101802783B1 (ko) 골프 스윙 표시 방법, 이를 수행하는 모바일 장치 및 이를 포함하는 골프 스윙 분석 시스템
WO2012026681A9 (ko) 네트워크를 이용한 가상현실 무도 시스템 및 그 제어 방법
WO2023113492A1 (ko) 카메라와 레이더 센서를 이용한 스포츠 트레이닝 영상 제공방법
WO2015093827A1 (ko) 뎁스 영상 분석을 통한 사용자 동작 인식 방법, 이를 이용한 사용자 동작 분석 장치 및 이를 기록한 컴퓨팅 장치에 의해 판독 가능한 기록매체
Tahan et al. A computer vision driven squash players tracking system

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16835305

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2018505422

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16835305

Country of ref document: EP

Kind code of ref document: A1