KR20210154345A - Method, device and server for tracing golf play - Google Patents

Method, device and server for tracing golf play Download PDF

Info

Publication number
KR20210154345A
KR20210154345A KR1020200071273A KR20200071273A KR20210154345A KR 20210154345 A KR20210154345 A KR 20210154345A KR 1020200071273 A KR1020200071273 A KR 1020200071273A KR 20200071273 A KR20200071273 A KR 20200071273A KR 20210154345 A KR20210154345 A KR 20210154345A
Authority
KR
South Korea
Prior art keywords
golf
shot
information
tracing
tracing device
Prior art date
Application number
KR1020200071273A
Other languages
Korean (ko)
Other versions
KR102369494B1 (en
Inventor
변대열
Original Assignee
(주)포트러시
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)포트러시 filed Critical (주)포트러시
Priority to KR1020200071273A priority Critical patent/KR102369494B1/en
Publication of KR20210154345A publication Critical patent/KR20210154345A/en
Application granted granted Critical
Publication of KR102369494B1 publication Critical patent/KR102369494B1/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B69/00Training appliances or apparatus for special sports
    • A63B69/36Training appliances or apparatus for special sports for golf
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0021Tracking a path or terminating locations
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B69/00Training appliances or apparatus for special sports
    • A63B69/36Training appliances or apparatus for special sports for golf
    • A63B69/3605Golf club selection aids informing player of his average or expected shot distance for each club
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B69/00Training appliances or apparatus for special sports
    • A63B69/36Training appliances or apparatus for special sports for golf
    • A63B69/3608Attachments on the body, e.g. for measuring, aligning, restraining
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/22Social work or social welfare, e.g. community support activities or counselling services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0021Tracking a path or terminating locations
    • A63B2024/0028Tracking the path of an object, e.g. a ball inside a soccer pitch
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • A63B2071/0625Emitting sound, noise or music
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B2071/0691Maps, e.g. yardage maps or electronic maps
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/10Positions
    • A63B2220/12Absolute positions, e.g. by using GPS
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/803Motion sensors
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/806Video cameras
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/808Microphones
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/83Special sensors, transducers or devices therefor characterised by the position of the sensor

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • Computing Systems (AREA)
  • Human Resources & Organizations (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Molecular Biology (AREA)
  • Artificial Intelligence (AREA)
  • General Engineering & Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Primary Health Care (AREA)
  • Economics (AREA)
  • Biomedical Technology (AREA)
  • Marketing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Child & Adolescent Psychology (AREA)
  • Studio Devices (AREA)

Abstract

The present invention relates to a golf play training method, a device thereof and a server thereof. The method comprises the following steps of: sensing motion through an IMU sensor; recognizing a behavior pattern from sensing data from the IMU sensor; and photographing an image by driving a camera sensor according to the recognized behavior pattern.

Description

골프 플레이 트레이싱 방법, 디바이스 및 서버{METHOD, DEVICE AND SERVER FOR TRACING GOLF PLAY}Golf play tracing method, device and server {METHOD, DEVICE AND SERVER FOR TRACING GOLF PLAY}

본 발명은 골프 플레이 트레이싱 방법, 디바이스 및 서버에 관한 것으로서, 구체적으로는 저전력으로 골프 필드에서의 플레이를 자동으로 추적하고 추적된 플레이에 대한 각종 정보를 골퍼에게 제공할 수 있는 골프 플레이 트레이싱 방법, 디바이스 및 서버에 관한 것이다. The present invention relates to a golf play tracing method, device, and server, and specifically, a golf play tracing method and device capable of automatically tracking a play on a golf field with low power and providing various information about the tracked play to a golfer and to the server.

골프는 다수의 홀이 갖춰진 골프장에서 정지된 공을 골프채로 쳐 홀에 넣는 경기로서 홀에 들어가기까지 걸린 타수가 적은 골퍼가 이기는 경기이다. 3인 또는 4인이 1개조로 구성되어 골프 라운드(라운딩)를 진행하고 1개조(또는 모든 조) 내의 구성원들의 총타수의 많고 적음으로 그 승패가 결정된다. Golf is a game in which a stationary ball is hit with a golf club and into the hole on a golf course with multiple holes, and the golfer with the fewest strokes required to enter the hole wins. A group of 3 or 4 players conducts a golf round (rounding), and the win or loss is decided by the number of total strokes of the members in one group (or all groups).

골프는 운동의 목적 외에도 친목을 다지기 위한 목적으로도 활용된다. 4시간 이상의 시간 동안 18홀(또는 9홀 또는 36홀)을 라운딩하는 골퍼는 골프를 플레이하는 동안 조원 간에 각종 유대관계를 가질 수 있다.Golf is used not only for the purpose of exercise, but also for the purpose of strengthening friendship. A golfer who plays 18 holes (or 9 holes or 36 holes) for more than 4 hours can have various bonds between team members while playing golf.

골퍼는 정기적 또는 비정기적으로 동일한 골프장이나 다른 골프장에 방문하여 해당 골프장에서 플레이한다. 골퍼는 골프장에서 총타수를 줄이기 위해 다양한 골프 연습을 하고 플레이할 골프장의 지형 등을 숙지한다. A golfer visits the same golf course or another golf course on a regular or irregular basis to play at the golf course. In order to reduce the total number of strokes on the golf course, golfers practice various golf and know the topography of the golf course to be played.

또한, 골프장 내에서 골프를 효과적으로 치기 위해서는 다양한 주변 도움이 필요하다. 예를 들어, 현재 위치에서 목적 홀(컵)까지의 남은 거리를 직접 알아보거나 캐디를 통해 알아보고 그에 상응하는 골프 클럽을 선택해야 한다. In addition, in order to play golf effectively on the golf course, various peripheral assistance is required. For example, you need to find out the remaining distance from the current location to the target hole (cup) yourself or through a caddy and select a golf club that corresponds to that.

4시간 이상 여러 지인과 동행하며 이루어지는 골프 라운딩은 하나의 추억 거리가 된다. 골퍼는 여러 지인과 어떻게 골프 플레이를 한 지랑 여러 지인과 어떻게 즐거운 시간을 가졌는지를 알 수 있는 방안이 필요하다. 일부 골퍼는 라운딩 시작전이나 종료후 라운딩을 기념하기 위해 기념사진 등을 찍을 수 있으나 라운딩 내에서 자동화된 영상을 제공할 수 있으면 바람직할 것이다. 나아가 골프장 내에서 자신의 플레이를 복기할 수 있다면 매우 바람직할 것이다. A round of golf with several acquaintances for more than 4 hours becomes a memory. A golfer needs a way to know how he played golf with several acquaintances and how he had a good time with various acquaintances. Some golfers may take a commemorative photo before or after the round starts to commemorate the round, but it would be desirable if an automated video could be provided within the round. Furthermore, it would be very desirable to be able to reproduce one's own play on the golf course.

이와 같이, 골프장에서 골퍼의 샷과 행적을 추적하고 이를 제공할 수 있는 골프 플레이 트레이싱 방법, 디바이스 및 서버가 필요하다.As described above, there is a need for a golf play tracing method, device, and server capable of tracking and providing the shot and actions of a golfer on a golf course.

공개특허 10-2018-0104366, 2018년09월21일Patent Publication 10-2018-0104366, September 21, 2018

본 발명은, 상술한 문제점을 해결하기 위해서 안출한 것으로서, 인공지능 기술을 이용하면서도 저전력으로 골퍼의 플레이와 이동을 추적 가능한 골프 플레이 트레이싱 방법, 디바이스 및 서버를 제공하는 데 그 목적이 있다.The present invention has been devised to solve the above problems, and an object of the present invention is to provide a golf play tracing method, device and server capable of tracking the play and movement of a golfer with low power while using artificial intelligence technology.

또한, 본 발명은 골프 라운딩 중 IMU 센서에서 인식되는 행동 패턴에 따라 인공지능 알고리즘을 자동 구동하여 저전력으로 골프 샷을 높은 정확도로 인식하고 홀별 플레이 히스토리를 자동 구성 가능한 골프 플레이 트레이싱 방법, 디바이스 및 서버를 제공하는 데 그 목적이 있다.In addition, the present invention provides a golf play tracing method, device and server capable of automatically driving an artificial intelligence algorithm according to a behavior pattern recognized by an IMU sensor during a round of golf to recognize a golf shot with high accuracy with low power and automatically configure a play history for each hole. Its purpose is to provide

또한, 본 발명은 골프 라운딩 중 모자나 선글라스에 부착되는 소형의 저전력 디바이스의 IMU 센서로부터 인식되는 행동 패턴에 따라 골프 플레이를 기념하기 위한 비디오 로그를 저전력으로 구성 가능한 골프 플레이 트레이싱 방법, 디바이스 및 서버를 제공하는 데 그 목적이 있다.In addition, the present invention provides a golf play tracing method, device and server capable of configuring a video log to commemorate golf play with low power according to a behavior pattern recognized by an IMU sensor of a small low-power device attached to a hat or sunglasses during a round of golf. Its purpose is to provide

또한, 본 발명은 골퍼의 행동 패턴을 IMU 센서를 통해 인식하고 지정된 행동 패턴의 인식시에만 전력 소비가 많은 인공지능 알고리즘을 구동하여 전력 소비량을 줄이고 경량화 가능하며 디바이스의 라이프 타임을 늘릴 수 있는 골프 플레이 트레이싱 방법, 디바이스 및 서버를 제공하는 데 그 목적이 있다.In addition, the present invention recognizes a golfer's behavioral pattern through an IMU sensor, and operates an artificial intelligence algorithm that consumes a lot of power only when a specified behavioral pattern is recognized, thereby reducing power consumption, making it lightweight, and increasing the lifetime of the device. An object of the present invention is to provide a tracing method, a device, and a server.

본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The technical problems to be achieved in the present invention are not limited to the technical problems mentioned above, and other technical problems not mentioned will be clearly understood by those of ordinary skill in the art to which the present invention belongs from the description below. will be able

본 발명의 일 양상에 따른 골프 플레이 트레이싱 디바이스는, 모자 또는 선글라스에 고정되고, 트레이싱 디바이스의 움직임을 센싱하는 IMU 센서, 외부 이미지를 촬영하는 카메라 센서 및 범용 프로세서와 AI 엔진을 포함하는 제어부로서, 범용 프로세서는 AI 엔진의 구동을 제어하고 IMU 센서로부터 수신되는 센싱 데이터로부터 행동 패턴을 인식하고 인식된 행동 패턴에 따라 카메라 센서를 구동하여 이미지 촬영을 제어하는, 제어부를 포함한다.A golf play tracing device according to an aspect of the present invention is fixed to a hat or sunglasses, an IMU sensor for sensing the movement of the tracing device, a camera sensor for photographing an external image, and a general-purpose processor and an AI engine as a controller including an AI engine, universal The processor includes a controller that controls the driving of the AI engine, recognizes a behavior pattern from sensing data received from the IMU sensor, and drives a camera sensor according to the recognized behavior pattern to control image capturing.

상기한 트레이싱 디바이스에 있어서, 트레이싱 디바이스의 위치를 센싱하는 GPS 센서 및 데이터를 저장하는 메모리를 더 포함하고, 범용 프로세서는 IMU 센서로부터의 복수의 센싱 데이터로부터 결정되는 행동 패턴이 골프샷 전의 준비 패턴에 대응하는 경우 AI 엔진을 구동하고, 범용 프로세서에 의해 구동되는 AI 엔진은 카메라 센서로부터 수신되는 이미지에서 골프공을 인식하고 골프공 인식 결과를 출력하고, 범용 프로세서는 골프공 인식 결과에 따라 GPS 센서로부터의 위치 정보, 카메라 센서에서 촬영되는 이미지 및 샷 시각을 포함하는 후보 샷 정보를 메모리에 저장한다.In the above-described tracing device, further comprising a GPS sensor for sensing the position of the tracing device and a memory for storing data, the general-purpose processor is configured such that the behavior pattern determined from a plurality of sensing data from the IMU sensor is in the preparation pattern before the golf shot. If corresponding, the AI engine is driven, and the AI engine driven by the general-purpose processor recognizes the golf ball in the image received from the camera sensor and outputs the golf ball recognition result, and the general-purpose processor receives the golf ball from the GPS sensor according to the golf ball recognition result. Candidate shot information including location information, an image captured by a camera sensor, and a shot time is stored in the memory.

상기한 트레이싱 디바이스에 있어서, 범용 프로세서는 골프공 인식에 후속하여 IMU 센서로부터의 복수의 센싱 데이터를 통해 샷 패턴을 인식하고 샷 패턴의 인식에 후속하여 카메라 센서를 제어하여 이미지를 촬영하여 후보 샷 정보에 저장하고 AI 엔진의 구동을 중단하며, 범용 프로세서는 최신 후보 샷 정보와 직전 후보 샷 정보의 위치 정보 차이가 지정된 거리 이상인 경우 최신 후보 샷 정보 직전의 후보 샷 정보를 샷 이벤트 정보로 메모리에 저장한다.In the above-described tracing device, the general-purpose processor recognizes a shot pattern through a plurality of sensing data from the IMU sensor following recognition of the golf ball, and controls the camera sensor to capture an image following the recognition of the shot pattern to obtain candidate shot information and stops driving the AI engine, and the general-purpose processor stores the candidate shot information immediately before the latest candidate shot information as shot event information in memory when the difference between the position information of the latest candidate shot information and the previous candidate shot information is more than a specified distance .

상기한 트레이싱 디바이스에 있어서, 범용 프로세서는 IMU 센서로부터의 복수의 센싱 데이터로부터 결정되는 행동 패턴이 뷰잉 패턴인 경우 카메라 센서를 구동하여 촬영되는 이미지를 메모리에 저장하고, 뷰잉 패턴 판단에 따라 메모리에 저장되는 하나 이상의 이미지는 다른 트레이싱 디바이스의 이미지와 함께 비디오 로그 구성에 이용되고, 뷰잉 패턴은 지정된 시간 동안에 IMU 센서로부터의 3축 가속도 센싱 데이터가 지정된 제1 임계 데이터 이하이고 3축 각속도 센싱 데이터가 지정된 제2 임계 데이터 이하인 경우의 행동 패턴이다.In the above-described tracing device, when the behavior pattern determined from a plurality of sensing data from the IMU sensor is the viewing pattern, the image captured by driving the camera sensor is stored in the memory, and stored in the memory according to the determination of the viewing pattern The one or more images to be captured are used for video log construction together with images from other tracing devices, and the viewing pattern is that the 3-axis acceleration sensing data from the IMU sensor is less than or equal to the specified first threshold data for a specified time and the 3-axis angular velocity sensing data is the specified second threshold. 2 This is the behavior pattern when the threshold data is less than or equal to the threshold data.

상기한 트레이싱 디바이스에 있어서, 음성신호를 수신하는 마이크 및 스피커를 포함하는 출력부를 더 포함하고, 범용 프로세서는 마이크로부터의 음성 데이터의 수신에 따라 AI 엔진을 구동하고 AI 엔진으로 골프장 정보, 현재 위치 정보 및 음성 데이터를 제공하고 AI 엔진으로부터 수신되는 응답 데이터를 출력부로 출력한다.In the above-described tracing device, further comprising an output unit including a microphone and a speaker for receiving a voice signal, the general-purpose processor drives the AI engine according to the reception of the voice data from the microphone and uses the AI engine to provide golf course information and current location information and providing voice data and outputting response data received from the AI engine to an output unit.

상기한 트레이싱 디바이스에 있어서, 범용 프로세서에 의해 구동되는 AI 엔진은 카메라 센서로부터 수신되는 이미지에서 클럽 번호를 인식하고, 범용 프로세서는 샷 패턴의 인식에 후속하여 구성되는 후보 샷 정보에 인식된 클럽 번호를 더 저장하고, AI 엔진은 음성 데이터로부터의 클럽 선택 요청에 따라 범용 프로세서에 의해 더 제공되는 사용자 골프 특성 정보에 따라 선택되는 클럽 번호를 포함하는 응답 데이터를 출력한다.In the above-described tracing device, the AI engine driven by the general-purpose processor recognizes the club number in the image received from the camera sensor, and the general-purpose processor adds the recognized club number to the candidate shot information configured following the recognition of the shot pattern. Further storing, the AI engine outputs response data including a club number selected according to the user golf characteristic information further provided by the general-purpose processor according to the club selection request from the voice data.

또한, 본 발명의 일 양상에 따른 골프 플레이 트레이싱 방법은 트레이싱 디바이스가 IMU 센서를 통해 움직임을 센싱하는 단계, 트레이싱 디바이스가 IMU 센서로부터의 센싱 데이터로부터 행동 패턴을 인식하는 단계 및 트레이싱 디바이스가 인식된 행동 패턴에 따라 카메라 센서를 구동하여 이미지를 촬영하는 단계를 포함하고, 트레이싱 디바이스는 모자 또는 선글라스에 고정되는 디바이스이다.In addition, the golf play tracing method according to an aspect of the present invention includes the steps of the tracing device sensing a movement through an IMU sensor, the tracing device recognizing a behavior pattern from sensing data from the IMU sensor, and the tracing device recognized behavior and taking an image by driving a camera sensor according to the pattern, wherein the tracing device is a device fixed to a hat or sunglasses.

상기한 트레이싱 방법에 있어서, 인식된 행동 패턴에 따라 이미지를 촬영하는 단계는, 트레이싱 디바이스가 IMU 센서로부터의 복수의 센싱 데이터로부터 결정되는 행동 패턴이 복수의 준비 패턴 중 하나의 준비 패턴에 대응하는 경우 트레이싱 디바이스의 AI 엔진을 구동하는 단계, 트레이싱 디바이스가 AI 엔진을 통해 카메라 센서로부터 수신되는 이미지에서 골프공을 인식하고 골프공 인식 결과를 생성하는 단계, 골프공 인식 결과에 따라 트레이싱 디바이스가 IMU 센서로부터의 복수의 센싱 데이터를 통해 샷 패턴을 인식하는 단계 및 샷 패턴의 인식에 후속하여 트레이싱 디바이스가 카메라 센서를 제어하여 이미지를 촬영하는 단계를 포함한다.In the above-described tracing method, the step of taking an image according to the recognized behavior pattern may include: when the behavior pattern determined from the plurality of sensing data from the IMU sensor by the tracing device corresponds to one preparation pattern among the plurality of preparation patterns Driving the AI engine of the tracing device, the tracing device recognizes a golf ball in the image received from the camera sensor through the AI engine and generates a golf ball recognition result, according to the golf ball recognition result, the tracing device is sent from the IMU sensor Recognizing a shot pattern through a plurality of sensing data of , and capturing an image by controlling a camera sensor by a tracing device subsequent to recognition of the shot pattern.

상기한 트레이싱 방법에 있어서, 인식된 행동 패턴에 따라 이미지를 촬영하는 단계 이후에, 트레이싱 디바이스가 골프공 인식 결과에 따라 GPS 센서로부터의 위치 정보, 카메라 센서에서 촬영되는 이미지 및 샷 시각을 포함하는 후보 샷 정보를 저장하는 단계 및 트레이싱 디바이스가 저장되는 최신 후보 샷 정보와 직전 후보 샷 정보의 위치 정보 차이가 지정된 거리 이상인 경우 최신 후보 샷 정보 직전의 후보 샷 정보를 샷 이벤트 정보로 저장하는 단계를 더 포함한다.In the above-described tracing method, after the step of photographing an image according to the recognized behavior pattern, the tracing device is a candidate including the position information from the GPS sensor, the image photographed by the camera sensor, and the shot time according to the golf ball recognition result The method further includes the steps of: storing the information on the shot and storing the information on the candidate shot immediately before the latest candidate shot information as shot event information when the difference in position information between the latest candidate shot information stored in the tracing device and the last candidate shot information is a specified distance or more do.

상기한 트레이싱 방법에 있어서, 인식된 행동 패턴에 따라 이미지를 촬영하는 단계는, 범용 프로세서가 IMU 센서로부터의 복수의 센싱 데이터로부터 결정되는 행동 패턴이 뷰잉 패턴인 경우 카메라 센서를 제어하여 이미지를 촬영하는 단계를 더 포함하고, 골프 플레이 트레이싱 방법은 트레이싱 디바이스가 카메라 센서를 통해 촬영된 이미지를 저장하는 단계를 더 포함하며, 뷰잉 패턴 인식에 따라 저장되는 복수의 촬영 이미지는 비디오 로그 구성에 이용되고, 뷰잉 패턴은 지정된 시간 동안에 IMU 센서로부터의 3축 가속도 센싱 데이터가 지정된 제1 임계 데이터 이하이고 3축 각속도 센싱 데이터가 지정된 제2 임계 데이터 이하인 경우의 행동 패턴이다.In the above-described tracing method, the step of taking an image according to the recognized behavior pattern includes: when the behavior pattern determined from a plurality of sensing data from the IMU sensor is a viewing pattern, the general-purpose processor controls the camera sensor to take an image Further comprising the step, the golf play tracing method further comprises the step of the tracing device storing the captured image through the camera sensor, the plurality of captured images stored according to the viewing pattern recognition is used for configuring a video log, viewing The pattern is a behavioral pattern when the 3-axis acceleration sensing data from the IMU sensor is equal to or less than the specified first threshold data and the 3-axis angular velocity sensing data is less than or equal to the specified second threshold data for a specified time.

또한, 본 발명의 일 양상에 따른 골프 플레이 트레이싱 서버는, IMU 센서로부터 행동 패턴을 인식하고 인식된 행동 패턴에 따라 카메라 센서를 구동하여 이미지를 촬영하는 트레이싱 디바이스에 저장된 골프장의 홀에서의 샷을 특정 가능한 복수의 샷 이벤트 정보를 수신하는 통신 유닛, 사용자 DB를 저장하는 저장 유닛 및 사용자 DB의 사용자 아이템에 수신된 복수의 샷 이벤트 정보를 이용하여 구성되는 골프 이력 정보 및 골프 특성 정보를 저장하는 제어 유닛을 포함하고, 제어 유닛은 통신 유닛을 통해 사용자 단말로부터 골프 이력 조회 요청의 수신에 따라 골프장 지도에 복수의 샷 이벤트 정보가 맵핑된 골프 이력 정보를 사용자 단말로 전송하고, 골프 이력 정보는 골프장 지도에 표시 가능한 홀별 복수의 샷 위치 정보와 복수의 샷 위치에서 촬영된 이미지를 포함하여 이미지로 표시 가능하다.In addition, the golf play tracing server according to an aspect of the present invention recognizes a behavior pattern from an IMU sensor and drives a camera sensor according to the recognized behavior pattern to specify a shot in a hole of a golf course stored in a tracing device that takes an image A communication unit for receiving a plurality of possible shot event information, a storage unit for storing a user DB, and a control unit for storing golf history information and golf characteristic information configured by using the plurality of shot event information received in a user item of the user DB Including, the control unit transmits, to the user terminal, golf history information in which a plurality of shot event information is mapped to the golf course map according to the reception of the golf history inquiry request from the user terminal through the communication unit, and the golf history information is on the golf course map It is possible to display as an image including information on a plurality of shot positions for each displayable hole and images taken at the plurality of shot positions.

상기와 같은 본 발명에 따른 골프 플레이 트레이싱 방법, 디바이스 및 서버는 인공지능 기술을 이용하면서도 저전력으로 골퍼의 플레이와 이동을 추적 가능한 효과가 있다.The golf play tracing method, device and server according to the present invention as described above have an effect of tracking the play and movement of a golfer with low power while using artificial intelligence technology.

또한, 상기와 같은 본 발명에 따른 골프 플레이 트레이싱 방법, 디바이스 및 서버는 골프 라운딩 중 IMU 센서에서 인식되는 행동 패턴에 따라 인공지능 알고리즘을 자동 구동하여 저전력으로 골프 샷을 높은 정확도로 인식하고 홀별 플레이 히스토리를 자동 구성 가능한 효과가 있다. In addition, the golf play tracing method, device and server according to the present invention as described above automatically drive an artificial intelligence algorithm according to the behavior pattern recognized by the IMU sensor during a round of golf to recognize golf shots with high accuracy with low power and play history for each hole. has an auto-configurable effect.

또한, 상기와 같은 본 발명에 따른 골프 플레이 트레이싱 방법, 디바이스 및 서버는 골프 라운딩 중 모자나 선글라스에 부착되는 소형의 저전력 디바이스의 IMU 센서로부터 인식되는 행동 패턴에 따라 골프 플레이를 기념하기 위한 비디오 로그를 저전력으로 구성 가능한 효과가 있다. In addition, the golf play tracing method, device, and server according to the present invention as described above according to the behavior pattern recognized by the IMU sensor of a small low-power device attached to a hat or sunglasses during a round of golf to commemorate golf play A video log for commemorating There is a configurable effect with low power.

또한, 상기와 같은 본 발명에 따른 골프 플레이 트레이싱 방법, 디바이스 및 서버는 골퍼의 행동 패턴을 IMU 센서를 통해 인식하고 지정된 행동 패턴의 인식시에만 전력 소비가 많은 인공지능 알고리즘을 구동하여 전력 소비량을 줄이고 경량화 가능하며 디바이스의 라이프타임을 늘릴 수 있는 효과가 있다.In addition, the golf play tracing method, device and server according to the present invention as described above recognize a golfer's behavior pattern through an IMU sensor, and reduce power consumption by driving an artificial intelligence algorithm that consumes a lot of power only when a specified behavior pattern is recognized. It is possible to reduce the weight and has the effect of extending the lifetime of the device.

본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다. The effects obtainable in the present invention are not limited to the above-mentioned effects, and other effects not mentioned may be clearly understood by those of ordinary skill in the art to which the present invention belongs from the following description. will be.

도 1은 골프 플레이를 트레이싱하기 위한 예시적인 시스템 구성도를 도시한 도면이다.
도 2는 골프 플레이 추적을 위한 트레이싱 디바이스의 예시적인 구성 블록도를 도시한 도면이다.
도 3은 트레이싱 디바이스(100)를 통해 골프 플레이를 트레이싱하고 골프 플레이와 관련되는 데이터를 저장하는 제어 흐름을 도시한 도면이다.
도 4는 골프장의 특정 홀 코스에서 트레이싱 디바이스를 통해 골퍼와 인터페이스하고 골프 플레이를 트레이싱하는 일 사용예를 나타내는 도면이다.
도 5는 트레이싱 서버의 예시적인 블록도를 나타내는 도면이다.
도 6은 비디오 로그 생성 장치(400)의 예시적인 블록도를 도시한 도면이다.
1 is a diagram illustrating an exemplary system configuration for tracing golf play.
2 is a diagram illustrating an exemplary configuration block diagram of a tracing device for golf play tracking.
3 is a diagram illustrating a control flow for tracing golf play through the tracing device 100 and storing data related to golf play.
4 is a diagram illustrating an example of using an interface with a golfer through a tracing device and tracing a golf play in a specific hole course of a golf course.
5 is a diagram illustrating an exemplary block diagram of a tracing server.
6 is a diagram illustrating an exemplary block diagram of an apparatus 400 for generating a video log.

상술한 목적, 특징 및 장점은 첨부된 도면을 참조하여 상세하게 후술 되어 있는 상세한 설명을 통하여 더욱 명확해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시 예를 상세히 설명하기로 한다. The above-described objects, features and advantages will become more clear through the detailed description that will be described later in detail with reference to the accompanying drawings, and accordingly, those of ordinary skill in the art to which the present invention pertains can understand the technical spirit of the present invention It will be easy to implement. In addition, in the description of the present invention, if it is determined that a detailed description of a known technology related to the present invention may unnecessarily obscure the gist of the present invention, the detailed description thereof will be omitted. Hereinafter, preferred embodiments according to the present invention will be described in detail with reference to the accompanying drawings.

도 1은 골프 플레이를 트레이싱하기 위한 예시적인 시스템 구성도를 도시한 도면이다. 1 is a diagram illustrating an exemplary system configuration for tracing golf play.

도 1에 따르면 골프 플레이를 트레이싱하기 위해 구성되는 시스템은 하나 이상의 사용자 단말(200), 하나 이상의 트레이싱 디바이스(100) 및 트레이싱 서버(300)를 포함하고, 사용자 단말(200)과 트레이싱 서버(300)는 인터넷을 통해 서로 연결될 수 있다. According to FIG. 1 , a system configured for tracing golf play includes one or more user terminals 200 , one or more tracing devices 100 and a tracing server 300 , and a user terminal 200 and a tracing server 300 . can be connected to each other via the Internet.

도 1을 통해 트레이싱 시스템의 구성 블록을 간단히 살펴보면, 트레이싱 디바이스(100)는 골퍼가 휴대하고 골퍼의 플레이를 트레이싱(추적)할 수 있는 디바이스이다. 트레이싱 디바이스(100)는 고정 클립 등을 포함하여 골퍼의 모자나 선글라스에 고정될 수 있도록 구성된다. Briefly looking at the constituent blocks of the tracing system through FIG. 1 , the tracing device 100 is a device that a golfer carries and can trace (track) a golfer's play. The tracing device 100 is configured to be fixed to a golfer's hat or sunglasses, including a fixing clip.

트레이싱 디바이스(100)는 인공지능(Artificial Intelligence :: AI) 엔진을 구비하여 AI 엔진(195)을 통해 골퍼의 샷을 추적하고 구비된 카메라를 이용하여 각종 이미지나 영상을 기록할 수 있도록 구성된다. 트레이싱 디바이스(100)는 관성(IMU) 센서에 의해서 파악되는 행동 패턴의 유형에 따라 오프된 AI 엔진(195)을 구동하거나 오프된 카메라를 구동하여 전력 소비를 최대한 줄일 수 있도록 구성된다. 그에 따라, 트레이싱 디바이스(100)는 라이프타임을 늘릴 수 있고 경량화시킬 수 있다. 특히, AI 엔진(195)의 구동을 최소화하여 인공지능 알고리즘의 수행에 요구되는 컴퓨팅 파워 공급을 최소화할 수 있다.The tracing device 100 is configured to include an artificial intelligence (AI) engine to track a golfer's shot through the AI engine 195 and to record various images or videos using the provided camera. The tracing device 100 is configured to reduce power consumption as much as possible by driving the AI engine 195 turned off or the camera turned off according to the type of behavior pattern detected by the inertial (IMU) sensor. Accordingly, the tracing device 100 may increase the lifetime and reduce the weight. In particular, it is possible to minimize the supply of computing power required to perform the AI algorithm by minimizing the driving of the AI engine 195 .

트레이싱 디바이스(100)에 대해서는 도 2 내지 도 4에서 상세히 살펴보도록 한다. The tracing device 100 will be described in detail with reference to FIGS. 2 to 4 .

사용자 단말(200)은 골퍼가 이용하는 단말이다. 사용자 단말(200)은 거치형 단말이거나 휴대형 단말일 수 있다. 사용자 단말(200)은 예를 들어, 스마트폰, 휴대폰, 태블릿 PC, 노트북, 개인용 컴퓨터 등일 수 있다. The user terminal 200 is a terminal used by a golfer. The user terminal 200 may be a stationary terminal or a portable terminal. The user terminal 200 may be, for example, a smart phone, a mobile phone, a tablet PC, a notebook computer, or a personal computer.

사용자 단말(200)은 트레이싱 디바이스(100)와 연결 가능한 외부 인터페이스를 가진다. 예를 들어, 사용자 단말(200)은 SD 카드 리더기, USB 단자, 컴포트 등을 구비하여 트레이싱 디바이스(100)의 각종 정보나 데이터에 액세스 가능하다. 사용자 단말(200)은 입력 인터페이스를 가지고 인터넷을 통해 트레이싱 서버(300)에 로그인할 수 있다. The user terminal 200 has an external interface connectable to the tracing device 100 . For example, the user terminal 200 is provided with an SD card reader, a USB terminal, a comfort, etc., it is possible to access various information or data of the tracing device (100). The user terminal 200 may log in to the tracing server 300 through the Internet having an input interface.

사용자 단말(200)은 사용자 ID와 패스워드 등의 인증 수단을 이용하여 트레이싱 서버(300)에 로그인하고 트레이싱 디바이스(100)에 저장되어 있는 정보나 데이터를 트레이싱 서버(300)에 업로딩할 수 있고 트레이싱 서버(300)로부터 골프 이력 정보 등을 수신하여 구비된 디스플레이에 출력할 수 있다. The user terminal 200 may log in to the tracing server 300 using an authentication means such as a user ID and password, and upload information or data stored in the tracing device 100 to the tracing server 300, and the tracing server Golf history information may be received from 300 and output to a provided display.

사용자 단말(200)은 골퍼가 개인이 휴대하는 단말이거나 골프장의 프런트 등에 설치되어 있는 컴퓨터일 수 있다. 개인용 컴퓨터나 노트북 등으로서 골프장 프런트에 설치되는 사용자 단말(200)은 비디오 로그의 생성에 이용되는 비디오 로그 생성 장치(400)로 동작할 수 있다. 비디오 로그 생성 장치(400)에 대해서는 도 6을 통해 좀 더 살펴보도록 한다.The user terminal 200 may be a terminal carried by a golfer or a computer installed at the front of a golf course. The user terminal 200 installed at the front of the golf course as a personal computer or laptop computer may operate as a video log generating apparatus 400 used to generate a video log. The video log generating apparatus 400 will be described in more detail with reference to FIG. 6 .

트레이싱 서버(300)는 골퍼의 골프 플레이를 추적할 수 있도록 구성되는 서버이다. 트레이싱 서버(300)는 사용자 DB를 포함하여 사용자별 특정 골프장에서 이루어진 홀별 골프 플레이, 사용자의 골프 특성 정보 등을 관리하고 추출할 수 있도록 구성된다. The tracing server 300 is a server configured to track a golfer's golf play. The tracing server 300 is configured to manage and extract golf play for each hole at a specific golf course for each user, including the user DB, and golf characteristic information of the user.

트레이싱 서버(300)에 대해서는 도 5를 통해 좀 더 상세히 살펴보도록 한다. The tracing server 300 will be described in more detail with reference to FIG. 5 .

도 2는 골프 플레이 추적을 위한 트레이싱 디바이스(100)의 예시적인 구성 블록도를 도시한 도면이다.2 is a diagram illustrating an exemplary configuration block diagram of the tracing device 100 for tracking golf play.

도 2에 따르면, 트레이싱 디바이스(100)는 입력부(110), 외부 인터페이스부(120), GPS 센서(130), IMU 센서(140), 메모리(150), 카메라 센서(160), 출력부(170), 마이크(180) 및 제어부(190)를 포함한다. 설계 변형에 따라 트레이싱 디바이스(100)는 도 2의 일부 구성 블록이 생략되거나 도 2에 도시되지 않은 다른 블록이 트레이싱 디바이스(100)에 더 포함될 수 있다. According to FIG. 2 , the tracing device 100 includes an input unit 110 , an external interface unit 120 , a GPS sensor 130 , an IMU sensor 140 , a memory 150 , a camera sensor 160 , and an output unit 170 . ), a microphone 180 and a control unit 190 . According to a design variation, some constituent blocks of FIG. 2 may be omitted from the tracing device 100 or other blocks not shown in FIG. 2 may be further included in the tracing device 100 .

본 발명에 따른 트레이싱 디바이스(100)는 소형 및 경량화되어 모자나 선글라스 등에 고정되도록 바람직하게 구성된다. 트레이싱 디바이스(100)는 클립, 자석, 집게, 홀더 등의 알려진 고정 수단을 포함하여 모자의 좌측 모서리나 우측 모서리, 선글라스의 좌측이나 우측테에 고정되어 골퍼와 함께 이동하고 골퍼의 시야에 따른 방향으로 지향할 수 있도록 구성된다. 트레이싱 디바이스(100)는 골퍼가 소유 가능한 디바이스이거나 골프장(의 프런트) 등에서 임대되는 디바이스일 수 있다. The tracing device 100 according to the present invention is preferably configured to be small and lightweight to be fixed to a hat or sunglasses. The tracing device 100 is fixed to the left or right corner of the hat, the left or right frame of the sunglasses, including known fixing means such as a clip, magnet, tongs, holder, etc. designed to be oriented. The tracing device 100 may be a device that a golfer can own or a device that is leased at (front of a golf course) or the like.

트레이싱 디바이스(100)는 내부 구성을 통해 착용한 골퍼의 샷을 감지하고 이를 기록하며 골프장에서 골프 플레이를 기념하기 위한 이미지를 촬영할 수 있도록 구성된다. The tracing device 100 is configured to detect a shot of a worn golfer through an internal configuration, record it, and take an image to commemorate golf play on the golf course.

트레이싱 디바이스(100)는 IMU(Inertial Measurement Unit) 센서(140)와 인공지능(AI) 엔진(195)을 구비하여 저전력을 소비하는 IMU 센서(140)를 통해 골퍼의 행동 분석을 통해 AI 엔진(195)을 구동하여 골프샷을 감지하고 이를 기록으로 저장할 수 있도록 구성된다. IMU 센서(140)와 연동하여 AI 엔진(195)의 구동을 최소화하여 트레이싱 디바이스(100)의 전력 소비를 최소화하고 그로 인해 라이프타임을 늘리고 무게를 경량화하여 모자나 선글라스 등에 부착 가능하도록 구성된다. The tracing device 100 is provided with an Inertial Measurement Unit (IMU) sensor 140 and an artificial intelligence (AI) engine 195 and an AI engine 195 through the IMU sensor 140 that consumes low power through analysis of the golfer's behavior. ) to detect a golf shot and to store it as a record. In conjunction with the IMU sensor 140, the driving of the AI engine 195 is minimized to minimize the power consumption of the tracing device 100, thereby increasing the lifetime and reducing the weight, so that it can be attached to a hat or sunglasses.

도 2를 통해, 트레이싱 디바이스(100)를 살펴보면, 입력부(110)는 사용자(골퍼) 입력을 수신한다. 입력부(110)는 버튼(터치 버튼, 푸쉬 버튼) 등을 포함하여 사용자 입력을 수신할 수 있다. 예를 들어, 입력부(110)는 전원 온/오프 입력 등을 수신하고 입력 신호를 제어부(190)로 전송할 수 있다. Referring to the tracing device 100 through FIG. 2 , the input unit 110 receives a user (golfer) input. The input unit 110 may receive a user input including buttons (touch buttons, push buttons), and the like. For example, the input unit 110 may receive a power on/off input, etc. and transmit an input signal to the control unit 190 .

외부 인터페이스부(120)는 트레이싱 디바이스(100) 외부의 단말이나 카드 등과 인터페이스한다. 외부 인터페이스부(120)는 USB 통신 모듈, 블루투스 통신 모듈 및/또는 SD 카드 리더기 등을 포함하여 외부의 사용자 단말(200)이나 트레이싱 디바이스(100)에 착탈 가능한 SD 카드와 각종 데이터를 송수신할 수 있다. The external interface unit 120 interfaces with an external terminal or card of the tracing device 100 . The external interface unit 120 may transmit/receive various data to and from an SD card detachable from the external user terminal 200 or the tracing device 100, including a USB communication module, a Bluetooth communication module, and/or an SD card reader. .

GPS 센서(130)는 트레이싱 디바이스(100)의 위치를 센싱한다. GPS 센서(130)는 GPS 위성으로부터의 GPS 신호를 센싱하여 센싱된 GPS 데이터를 제어부(190)로 전달하거나 하나 이상의 GPS 위성으로부터 GPS 신호로부터 결정되는 위치 데이터(예를 들어, 위도 경도의 위치 데이터)를 제어부(190)를 센싱 데이터로 전달할 수 있다. The GPS sensor 130 senses the position of the tracing device 100 . The GPS sensor 130 senses a GPS signal from a GPS satellite and transmits the sensed GPS data to the controller 190 or location data determined from a GPS signal from one or more GPS satellites (eg, location data of latitude and longitude) may be transmitted to the control unit 190 as sensing data.

IMU 센서(140)는 모자나 선글라스 등에 고정된 트레이싱 디바이스(100)의 움직임을 센싱한다. IMU 센서(140)는 트레이싱 디바이스(100)를 통해 골퍼의 움직임(골퍼의 이동 속도, 지향 방향, 가속도 등)을 센싱할 수 있도록 구성되는 데 IMU 센서(140)는 예를 들어, 적어도 3축의 가속도계 센서, 적어도 3축의 각속도계 센서 및 지자계 센서를 포함하여 구성된다. The IMU sensor 140 senses the movement of the tracing device 100 fixed to a hat or sunglasses. The IMU sensor 140 is configured to sense a golfer's movement (a golfer's movement speed, directional direction, acceleration, etc.) through the tracing device 100, and the IMU sensor 140 is, for example, an accelerometer of at least three axes. and a sensor, at least a three-axis angular accelerometer sensor, and a geomagnetic sensor.

IMU 센서(140)를 통해, 트레이싱 디바이스(100)(의 제어부(190))는 골퍼의 진행방향, 횡방향 및 높이방향의 가속도와 피치, 요, 롤의 각속도 측정이 가능하고 이로부터 골퍼의 속도와 자세, 지향 방향 등을 결정할 수 있다. Through the IMU sensor 140, the tracing device 100 (control unit 190 of) can measure the acceleration of the golfer in the traveling direction, the lateral direction and the height direction, and the angular velocity of the pitch, yaw, and roll, and from this, the golfer's speed You can determine your posture, orientation, and direction.

메모리(150)는 비휘발성 메모리를 포함하여 각종 데이터와 프로그램을 저장한다. 메모리(150)는 제어부(190)에서 수행되는 제어 프로그램, AI 프로그램 등을 저장할 수 있다. 또한, 메모리(150)는 골퍼의 골프 특성 정보나 하나 이상의 골프장 정보 등을 더 저장한다. The memory 150 stores various data and programs including non-volatile memory. The memory 150 may store a control program, an AI program, etc. executed by the controller 190 . In addition, the memory 150 further stores golf characteristic information of the golfer or one or more golf course information.

골프 특성 정보는 트레이싱 디바이스(100)를 사용하는 골퍼의 골프 플레이 특성을 포함하고 예를 들어, 골프채 클럽 번호별 골퍼의 평균 샷거리를 포함할 수 있다. 골프장 정보는 골프장 내의 홀별 위치 영역 정보, 홀별 파타수, 난이도 등에 대한 정보를 포함할 수 있다. 골프 특성 정보와 골프장 정보는 사용자 단말(200)이나 프런트 등의 컴퓨터 등을 통해 트레이싱 디바이스(100)에 현장에서 또는 미리 다운로드될 수 있다. The golf characteristic information may include golf play characteristics of a golfer using the tracing device 100 and, for example, may include an average shot distance of the golfer for each golf club club number. The golf course information may include information on location area information for each hole in the golf course, the number of putts per hole, difficulty level, and the like. Golf characteristic information and golf course information may be downloaded to the tracing device 100 in the field or in advance through a computer such as the user terminal 200 or the front desk.

메모리(150)에는 골프장에서의 라운딩에 따라 구성되는 샷 정보와 트레이싱 디바이스(100)의 움직임에 따라 촬영되는 이미지(의 동영상)를 동적으로 구성하여 더 저장할 수 있다. 설계 예에 따라 메모리(150)는 휘발성 메모리를 더 포함할 수 있다. In the memory 150 , shot information configured according to rounding on a golf course and an image (movie of) captured according to the movement of the tracing device 100 may be dynamically configured and further stored. According to a design example, the memory 150 may further include a volatile memory.

카메라 센서(160)는 트레이싱 디바이스(100) 외부의 이미지를 촬영한다. 카메라 센서(160)는 모자나 선글라스를 통해 골퍼의 전방 이미지를 촬영할 수 있도록 바람직하게 구성된다. 카메라 센서(160)는 CCD, CMOS 센서 등을 포함하여 구비된 렌즈에서 노출되는 외부 이미지를 촬영할 수 있도록 구성된다. 카메라 센서(160)는 제어부(190)의 제어에 따라 이미지(영상)를 촬영하거나 촬영 대기할 수 있다. 카메라 센서(160)는 고화질의 이미지를 촬영할 필요는 없고 예를 들어, 초당 30 프레임의 100만 화소 내외의 이미지를 촬영할 수 있는 센서로 구성될 수 있다.The camera sensor 160 captures an image outside the tracing device 100 . The camera sensor 160 is preferably configured to photograph the front image of the golfer through a hat or sunglasses. The camera sensor 160 is configured to photograph an external image exposed by a lens provided including a CCD, a CMOS sensor, and the like. The camera sensor 160 may photograph an image (video) or wait for recording under the control of the controller 190 . The camera sensor 160 does not need to capture a high-quality image, and may be configured as a sensor capable of capturing an image of about 1 million pixels at 30 frames per second, for example.

출력부(170)는 트레이싱 디바이스(100)에서 생성되는 신호를 출력한다. 출력부(170)는 LED나 스피커 등을 포함하여 제어부(190)의 제어에 따른 LED를 온/오프하거나 스피커를 통해 내부에서 생성되는 음성신호를 진동신호로 출력할 수 있다. The output unit 170 outputs a signal generated by the tracing device 100 . The output unit 170 may turn on/off an LED according to the control of the controller 190, including an LED or a speaker, or output a voice signal generated inside through the speaker as a vibration signal.

마이크(180)는 음성신호를 수신한다. 마이크(180)는 진동센서 등을 포함하여 트레이싱 디바이스(100)를 부착한 골퍼의 음성신호를 전기신호로 변환하여 제어부(190)로 출력할 수 있다. The microphone 180 receives a voice signal. The microphone 180 may convert the voice signal of the golfer to which the tracing device 100 is attached, including a vibration sensor, into an electrical signal and output it to the controller 190 .

제어부(190)는 트레이싱 디바이스(100)를 제어한다. 제어부(190)는 메모리(150)에 저장되어 있는 제어 프로그램 및/또는 AI 프로그램 등의 수행을 통해 트레이싱 디바이스(100)를 제어할 수 있다. The controller 190 controls the tracing device 100 . The controller 190 may control the tracing device 100 through execution of a control program and/or an AI program stored in the memory 150 .

본 발명에 따른 제어부(190)는 범용 프로세서(191)(General Processor)와 AI 엔진(195)을 포함하여 구성된다. 범용 프로세서(191)는 예를 들어 RISC 프로세서일 수 있고 AI 엔진(195)은 TPU(Tensor Processing Unit)일 수 있다. The control unit 190 according to the present invention is configured to include a general processor 191 (General Processor) and an AI engine 195 . The general-purpose processor 191 may be, for example, a RISC processor, and the AI engine 195 may be a Tensor Processing Unit (TPU).

제어 프로그램을 수행하는 범용 프로세서(191)는 AI 엔진(195)의 구동 및 구동 종료를 제어할 수 있고 각종 센서(IMU 센서(140), GPS 센서(130) 등)를 통한 센싱 데이터나 입력부(110)나 마이크(180)를 통한 사용자 입력에 따라 제어 프로그램을 통해 다른 블록을 제어할 수 있도록 구성된다. The general-purpose processor 191 that executes the control program can control the driving and ending of the driving of the AI engine 195, and sensing data or input unit 110 through various sensors (IMU sensor 140, GPS sensor 130, etc.) ) or the microphone 180 is configured to control other blocks through a control program according to a user input.

예를 들어, 범용 프로세서(191)는 IMU 센서(140)로부터 수신되는 센싱 데이터로부터 트레이싱 디바이스(100)를 착용한 골퍼의 행동 패턴을 인식하고 인식된 행동 패턴에 따라 카메라 센서(160)를 구동하여 이미지 촬영을 제어할 수 있다. For example, the general-purpose processor 191 recognizes the behavior pattern of the golfer wearing the tracing device 100 from the sensing data received from the IMU sensor 140 and drives the camera sensor 160 according to the recognized behavior pattern. You can control the shooting of images.

AI 엔진(195)은 범용 프로세서(191)에 의한 제어로 구동될 수 있고 CNN( Convolutional Neural Network) 또는 RNN(Recursive Neural Network) 등의 AI 프로그램을 수행할 수 있다. AI 엔진(195)은 입력되는 일련의 이미지(동영상)에서 골프공을 인식하거나 골프채의 클럽 번호를 인식할 수 있다. 또는 AI 엔진(195)은 마이크(180)를 통해 입력되는 음성 신호에 대한 응답을 생성하여 출력할 수 있다. The AI engine 195 may be driven under the control of the general-purpose processor 191 and may execute an AI program such as a Convolutional Neural Network (CNN) or a Recursive Neural Network (RNN). The AI engine 195 may recognize a golf ball from a series of input images (videos) or recognize a club number of a golf club. Alternatively, the AI engine 195 may generate and output a response to a voice signal input through the microphone 180 .

본 발명에 따른 AI 엔진(195)은 범용 프로세서(191)에 의해 구동 제어되고 범용 프로세서(191)는 AI 엔진(195)의 구동이 필요한 이벤트를 인식하여 이벤트 발생시에만 AI 엔진(195)을 구동할 수 있도록 구성된다. The AI engine 195 according to the present invention is driven and controlled by the general-purpose processor 191, and the general-purpose processor 191 recognizes an event requiring the driving of the AI engine 195 and drives the AI engine 195 only when an event occurs. configured to be able to

범용 프로세서(191)와 AI 엔진(195)을 포함하는 제어부(190)는 단일 칩셋으로 구성될 수 있다. 단일 칩셋 내에는 트레이싱 디바이스(100)의 다른 블록들이 더 포함될 수도 있다. 제어부(190)에서 이루어지는 각종 제어 흐름은 도 3 및 도 4를 통해서 좀 더 상세히 살펴보도록 한다. The controller 190 including the general-purpose processor 191 and the AI engine 195 may be configured as a single chipset. Other blocks of the tracing device 100 may be further included in a single chipset. Various control flows performed by the controller 190 will be described in more detail with reference to FIGS. 3 and 4 .

트레이싱 디바이스(100)는 그 외 배터리를 더 포함할 수 있다. 배터리는 트레이싱 디바이스(100)의 블록들에 전원을 공급할 수 있도록 구성된다. 설계 예에 따라, 배터리로부터 출력되고 임의의 블록으로 제공되는 전원은 제어부(190)(의 범용 프로세서(191))에 의한 제어로 해당 블록(예를 들어, 카메라 센서(160), AI 엔진(195) 등)으로 공급되거나 차단될 수 있다. The tracing device 100 may further include other batteries. The battery is configured to supply power to the blocks of the tracing device 100 . According to the design example, the power output from the battery and provided to an arbitrary block is controlled by the control unit 190 (the general-purpose processor 191 of the block) (eg, the camera sensor 160, the AI engine 195). ), etc.) can be supplied or blocked.

도 3은 트레이싱 디바이스(100)를 통해 골프 플레이를 트레이싱하고 골프 플레이와 관련되는 데이터를 저장하는 제어 흐름을 도시한 도면이다. 도 3의 제어 흐름은 트레이싱 디바이스(100)에 의해 수행된다. 도 3의 제어 흐름을 통해, 트레이싱 디바이스(100)는 골퍼의 음성에 반응하여 골프장 내 홀( 코스)별 상태에 따라 응답할 수 있고 골프장 내의 골퍼의 샷 히스토리와 장면을 내부에 기록하고 골퍼에게 제공할 수 있다.3 is a diagram illustrating a control flow for tracing golf play through the tracing device 100 and storing data related to golf play. The control flow of FIG. 3 is performed by the tracing device 100 . Through the control flow of FIG. 3 , the tracing device 100 may respond according to the state of each hole (course) in the golf course in response to the golfer's voice, and record the shot history and scene of the golfer in the golf course inside and provide it to the golfer can do.

먼저, 골퍼나 골프 관리자 등은 트레이싱 디바이스(100)를 셋팅하고 구동시킨다(S101). 골퍼나 골프 관리자는 트레이싱 디바이스(100)의 메모리(150)에 골퍼 개인별 골프 특성 정보 및/또는 골프 라운딩이 이루어질 골프장 정보를 셋팅한다. First, a golfer or a golf manager sets and drives the tracing device 100 (S101). A golfer or a golf manager sets golf characteristic information for each individual golfer and/or golf course information on which a golf round is to be made in the memory 150 of the tracing device 100 .

또한, 골퍼나 골프 관리자 등은 트레이싱 디바이스(100)의 입력부(110)의 전원 버튼(또는 플레이 버튼)을 눌러 트레이싱 디바이스(100)를 구동시킬 수 있다. 구동에 따라 제어 프로그램을 수행하는 범용 프로세서(191)는 AI 엔진(195)과 카메라 센서(160)를 오프시키고 센서 데이터를 수신할 GPS 센서(130) 및 IMU 센서(140)를 온시킬 수 있다. Also, a golfer or a golf manager may press the power button (or play button) of the input unit 110 of the tracing device 100 to drive the tracing device 100 . The general-purpose processor 191 that executes the control program according to the operation may turn off the AI engine 195 and the camera sensor 160 and turn on the GPS sensor 130 and the IMU sensor 140 to receive sensor data.

트레이싱 디바이스(100)가 구동 시작함에 따라, 트레이싱 디바이스(100)는 주기적으로 센서 데이터를 수신하고 수신된 데이터로부터 각종 정보를 구성(S103)한다.As the tracing device 100 starts driving, the tracing device 100 periodically receives sensor data and configures various information from the received data (S103).

예를 들어, 제어부(190)(의 범용 프로세서(191))는 GPS 센서(130)를 통해 GPS 데이터를 주기적으로 수신하고 GPS 데이터로부터 트레이싱 디바이스(100)의 현재 위치 정보를 구성할 수 있다. 제어부(190)(의 범용 프로세서(191))는 셋팅된 골프장 정보로부터 현재 위치 정보에 대응하는 홀 (코스 )정보 및 홀(컵)에서의 상대적인 현재 위치를 결정할 수 있다. For example, the controller 190 (the general-purpose processor 191 of) may periodically receive GPS data through the GPS sensor 130 and configure current location information of the tracing device 100 from the GPS data. The controller 190 (the general-purpose processor 191 of) may determine the relative current position in the hole (course ) information and the hole (cup) corresponding to the current position information from the set golf course information.

또한, 제어부(190)(의 범용 프로세서(191))는 IMU 센서(140)를 통해 주기적으로 수신되는 센싱 데이터에 따라 트레이싱 디바이스(100)의 움직임을 센싱한다. 제어부(190)(의 범용 프로세서(191))는 IMU 센서(140)로부터 일련의 센싱 데이터로부터 골퍼의 움직임 정보를 구성할 수 있다. In addition, the controller 190 (the general-purpose processor 191 of) senses the movement of the tracing device 100 according to sensing data periodically received through the IMU sensor 140 . The controller 190 (the general-purpose processor 191 of) may configure movement information of the golfer from a series of sensing data from the IMU sensor 140 .

움직임 정보는 예를 들어, 이동중, 정지, 전방 주시, 하향 주시, 회전 등 복수의 센싱 데이터로부터 결정되는 단일 움직임 특성을 나타낼 수 있다. 다수의(일련의 연속되는) 움직임 정보는 행동 패턴을 구성할 수 있다. 움직임 정보는 IMU 센서(140)를 통해 구성 가능한 각종 데이터(예를 들어, 이동 방향, 이동 속도, 지향 방향, 회전 속도 등)를 더 포함할 수 있다. 이러한 움직임 정보는 제어부(190)(의 범용 프로세서(191))에 의해 구성 가능하다. The motion information may represent, for example, a single motion characteristic determined from a plurality of sensing data such as moving, stationary, forward gaze, downward gaze, and rotation. A plurality of (series of consecutive) motion information may constitute a behavioral pattern. The motion information may further include various data configurable through the IMU sensor 140 (eg, moving direction, moving speed, directing direction, rotational speed, etc.). Such motion information is configurable by the controller 190 (the general-purpose processor 191 of).

여기서, 센서 데이터의 수신 과정(과 나아가 정보 구성 과정)은 반복적으로 수행되고 다른 단계의 수행 동안에도 이루어져 현재 위치 정보나 현재의 움직임 정보가 갱신, 변경되고 일련의 현재 위치 정보 및 움직임 정보는 메모리(150)에 임시 저장될 수 있다.Here, the process of receiving sensor data (and further, the process of constructing information) is repeatedly performed and also during execution of other steps, so that the current location information or current motion information is updated or changed, and a series of current location information and motion information is stored in the memory ( 150) may be temporarily stored.

센서 데이터의 수신 및 구성 과정에 이어, 트레이싱 디바이스(100)는 골퍼로부터의 입력을 수신할 수 있고 예를 들어, 음성신호를 수신(S105)할 수 있다. Following the process of receiving and configuring the sensor data, the tracing device 100 may receive an input from the golfer and, for example, may receive a voice signal ( S105 ).

마이크(180)로부터의 음성 데이터를 수신한 제어부(190)(의 범용 프로세서(191))는 음성 데이터에 대응한 응답 데이터를 구성하여 출력부(170)의 스피커로 출력(S107)할 수 있다. The control unit 190 (the general-purpose processor 191 of) that has received the voice data from the microphone 180 may configure response data corresponding to the voice data and output it to the speaker of the output unit 170 (S107).

예를 들어, 범용 프로세서(191)는 일련의 음성 데이터의 수신에 따라 AI 엔진(195)을 구동하고 일련의 음성 데이터들과 현재 위치 정보 및 골프장 정보와 나아가 골프 특성 정보를 AI 엔진(195)으로 제공하고 AI 엔진(195)으로부터 수신되는 응답 데이터를 출력부(170)의 스피커로 출력할 수 있다. For example, the general-purpose processor 191 drives the AI engine 195 according to the reception of a series of voice data, and converts a series of voice data, current location information, golf course information, and further golf characteristic information to the AI engine 195 . provided and the response data received from the AI engine 195 may be output to the speaker of the output unit 170 .

일련의 음성 데이터는 예를 들어, 현재 위치에서 홀까지의 거리에 대한 질의 일 수 있고 AI 엔진(195)은 현재 위치 정보로부터 홀까지의 거리를 골프장 정보를 통해 결정하고 남은 거리를 나타내는 음성 응답을 출력부(170)를 통해 출력할 수 있다. A series of voice data may be, for example, a query about the distance from the current location to the hole, and the AI engine 195 determines the distance from the current location information to the hole through golf course information and returns a voice response indicating the remaining distance. The output may be output through the output unit 170 .

또는, 일련의 음성 데이터는 현재 위치에서 이용이 바람직한 골프채 클럽 선택 요청일 수 있고 AI 엔진(195)은 현재 위치 정보로부터 홀까지의 거리를 골프장 정보를 통해 결정하고 골퍼의 골프 특성 정보의 클럽 번호별 평균 샷거리를 이용하여 현재의 골프샷에 이용될 골프채의 클럽 번호를 선택하여 클럽 선택 요청에 대한 음성 응답으로서 선택된 클럽 번호를 포함하는 음성 응답을 출력부(170)를 통해 출력할 수 있다. Alternatively, the series of voice data may be a request to select a golf club club desired to be used at the current location, and the AI engine 195 determines the distance from the current location information to the hole through the golf course information and by club number of the golfer's golf characteristic information. By selecting the club number of the golf club to be used for the current golf shot using the average shot distance, as a voice response to the club selection request, a voice response including the selected club number may be output through the output unit 170 .

응답 데이터의 출력 이후에, 트레이싱 디바이스(100)는 계속 센서 데이터를 수신 및 정보를 구성(S103 이하 참조)하고 골퍼의 입력이나 움직임에 따라 설정되는 기능을 후속 수행할 수 있다. After outputting the response data, the tracing device 100 may continue to receive sensor data and configure information (refer to S103 below), and may subsequently perform a function set according to a golfer's input or movement.

트레이싱 디바이스(100)는 IMU 센서(140)로부터 수신되는 일련의 센서 데이터로부터 지정된 행동 패턴을 인식(S109)한다. 골퍼에 의한 음성신호 입력이 없는 경우 제어부(190)(의 범용 프로세서(191))는 일련의 움직임 정보로부터 행동 패턴을 인식한다. 행동 패턴은 하나 이상의 일련의 움직임 정보로부터 인식될 수 있고 예를 들어, 이동, 정지, 하측 방향 지향 등의 연속적인 움직임 정보들로 특정 행동 패턴이 인식될 수 있다. The tracing device 100 recognizes a specified behavior pattern from a series of sensor data received from the IMU sensor 140 (S109). When there is no voice signal input by the golfer, the controller 190 (the general-purpose processor 191 of) recognizes a behavior pattern from a series of movement information. The behavior pattern may be recognized from one or more series of motion information, and for example, a specific behavior pattern may be recognized as continuous motion information such as movement, stop, and downward orientation.

트레이싱 디바이스(100)는 인식된 행동 패턴에 따라 (오프된) 카메라 센서(160)를 구동하여 이미지를 촬영(S111 내지 S129 참조)할 수 있다.The tracing device 100 may take an image (refer to S111 to S129) by driving the (off) camera sensor 160 according to the recognized behavior pattern.

구체적으로, 트레이싱 디바이스(100)는 IMU 센서(140)로부터의 일련의 센싱 데이터들로부터 결정되는 행동 패턴이 골퍼가 샷을 하기 전 준비 패턴에 대응하는 지를 결정(S111)한다. 트레이싱 디바이스(100)에 미리 설정되거나 저장되어 있는 복수의 준비 패턴 각각은 정의된 일련의 움직임 정보로 표현될 수 있고 골퍼가 골프샷을 하기 전에 미리 가지는 준비 행동 과정을 나타낼 수 있다. 준비 패턴은 예를 들어, 골프채 들고, 이동하고, 다리를 벌려 준비 자세를 취하고 하측 전방을 주시하는 행동 패턴일 수 있다. Specifically, the tracing device 100 determines whether a behavior pattern determined from a series of sensed data from the IMU sensor 140 corresponds to a preparation pattern before the golfer takes a shot ( S111 ). Each of the plurality of preparatory patterns preset or stored in the tracing device 100 may be expressed as a defined series of motion information and may represent a preparatory action process that the golfer has in advance before taking a golf shot. The preparation pattern may be, for example, a behavior pattern of holding a golf club, moving, taking a ready posture with legs apart, and looking at the lower front side.

준비 패턴은 골퍼별로 서로 다를 수 있어, 트레이싱 디바이스(100)의 범용 프로세서(191)는 여러 준비 패턴들을 내부에 가지고 결정된 행동 패턴이 골프샷 전의 여러 준비 패턴 중 하나의 준비 패턴에 대응하는 경우 골프샷 전의 준비 패턴이 발생한 것으로 결정할 수 있다. The preparation pattern may be different for each golfer, and the general-purpose processor 191 of the tracing device 100 has several preparation patterns therein, and when the determined action pattern corresponds to one preparation pattern among several preparation patterns before a golf shot, a golf shot It can be determined that a previous preparatory pattern has occurred.

결정된 행동 패턴이 준비 패턴인 경우, 트레이싱 디바이스(100)는 AI 엔진(195)을 구동(S113)한다. 예를 들어, 범용 프로세서(191)는 AI 엔진(195)을 구동하기 위한 신호를 AI 엔진(195)으로 나아가 배터리로 출력할 수 있다. 범용 프로세서(191)는 카메라 센서(160)도 구동한다. When the determined behavior pattern is the preparation pattern, the tracing device 100 drives the AI engine 195 ( S113 ). For example, the general-purpose processor 191 may output a signal for driving the AI engine 195 to the AI engine 195 to a battery. The general-purpose processor 191 also drives the camera sensor 160 .

AI 엔진(195)의 구동에 따라 트레이싱 디바이스(100)는 카메라 센서(160)로부터 수신되는 일련의 이미지에서 골프공을 인식하고 골프공 인식 결과를 생성(S115)한다. 범용 프로세서(191)에 의해 구동되는 AI 엔진(195)은 카메라 센서(160)로부터 수신되는 이미지에서 지정된 시간 동안, 또는 범용 프로세서(191)에 의해 다른 지정된 행동 패턴이나 움직임 정보의 인식 이전에, 골프공을 인식하고 골프공 인식 여부를 나타내는 결과를 생성하여 범용 프로세서(191)나 메모리(150)로 출력할 수 있다. According to the driving of the AI engine 195, the tracing device 100 recognizes a golf ball from a series of images received from the camera sensor 160 and generates a golf ball recognition result (S115). AI engine 195 driven by general-purpose processor 191 for a specified time in the image received from camera sensor 160, or before recognition of other specified behavior patterns or movement information by general-purpose processor 191, golf The ball may be recognized and a result indicating whether or not the golf ball is recognized may be generated and output to the general-purpose processor 191 or the memory 150 .

골프공의 인식과 함께, AI 엔진(195)은 카메라 센서(160)로부터 수신되는 이미지에서 클럽 번호(예를 들어, 7번 등)를 인식할 수 있다. 골프공의 인식에 이용되는 AI 프로그램과 클럽 번호 인식에 이용되는 AI 프로그램은 동일하거나 상이할 수 있다. 예를 들어, 골프공 인식에 이용되는 AI 프로그램은 CNN AI 프로그램이고 클럽번호 인식에 이용되는 AI 프로그램은 RNN AI 프로그램일 수 있다. 골퍼는 준비 패턴 이후에 골프 클럽 번호를 시각적으로 확인할 수 있고 이 때 AI 엔진(195)은 클럽 번호를 인식 가능하다.Together with the recognition of the golf ball, the AI engine 195 may recognize the club number (eg, number 7, etc.) in the image received from the camera sensor 160 . The AI program used to recognize the golf ball and the AI program used to recognize the club number may be the same or different. For example, the AI program used for golf ball recognition may be a CNN AI program, and the AI program used for club number recognition may be an RNN AI program. The golfer can visually check the golf club number after the preparation pattern, and at this time, the AI engine 195 can recognize the club number.

골프공의 인식 결과에 따른 골프공의 인식 이후에, 트레이싱 디바이스(100)는 IMU 센서(140)로부터의 일련의 센싱 데이터들에서 샷 패턴을 인식(S117)한다. 골프공이 인식된 경우에, 트레이싱 디바이스(100)가 이후 과정(S117 내지 S121)을 수행할 수 있다. After recognition of the golf ball according to the recognition result of the golf ball, the tracing device 100 recognizes a shot pattern from a series of sensing data from the IMU sensor 140 ( S117 ). When the golf ball is recognized, the tracing device 100 may perform subsequent processes ( S117 to S121 ).

트레이싱 디바이스(100)의 범용 프로세서(191)는 AI 엔진(195)에 의한 골프공 인식에 후속하여 AI 엔진(195)의 구동을 중단하고 IMU 센서(140)로부터의 일련의 센싱 데이터를 통해 골프샷 패턴을 인식한다. 샷 패턴도 다른 행동패턴과 유사하게 일련의 움직임 정보로 정의될 수 있고 샷 패턴은 골퍼의 이동없이 특정 방향으로 회전 움직임으로 정의될 수 있다.The general-purpose processor 191 of the tracing device 100 stops the driving of the AI engine 195 following the recognition of the golf ball by the AI engine 195 and uses a series of sensing data from the IMU sensor 140 to take a golf shot. Recognize patterns. A shot pattern may be defined as a series of movement information similar to other behavior patterns, and a shot pattern may be defined as a rotational movement in a specific direction without movement of the golfer.

샷 패턴의 인식에 후속하여, 트레이싱 디바이스(100)는 카메라 센서(160)를 제어하여 이미지를 촬영(S119)한다. 예를 들어, 제어부(190)의 범용 프로세서(191)는 샷 패턴 인식 직후에 카메라 센서(160)를 구동하여 카메라 센서(160)를 통해 이미지 촬영을 제어하고 촬영된 이미지를 메모리(150)에 저장할 수 있다. Following the recognition of the shot pattern, the tracing device 100 controls the camera sensor 160 to capture an image (S119). For example, the general-purpose processor 191 of the controller 190 drives the camera sensor 160 immediately after recognizing the shot pattern to control image capturing through the camera sensor 160 and to store the captured image in the memory 150 . can

이미지 촬영이 이루어짐에 따라, 트레이싱 디바이스(100)는 특정 골프장의 현재 위치에서 샷이 이루어진 것임을 특정할 수 있는 후보 샷 정보를 생성하여 메모리(150)에 저장(S121)한다. 범용 프로세서(191)에 의해 생성되고 메모리(150)에 저장되는 후보 샷 정보는 적어도 GPS 센서(130)에 의해 결정되는 현재 위치 정보, 샷 패턴 인식 후 촬영된 이미지 및 골프샷이 이루어진 시각을 포함하고 AI 엔진(195)에 의해 더 인식되고 골프샷에 이용된 클럽 번호를 더 포함할 수 있다. 범용 프로세서(191)는 AI 엔진(195)을 통해 인식된 클럽 번호를 후보 샷 정보에 더 저장 가능하다. As the image is captured, the tracing device 100 generates candidate shot information that can specify that the shot is made at the current location of a specific golf course and stores it in the memory 150 ( S121 ). The candidate shot information generated by the general-purpose processor 191 and stored in the memory 150 includes at least the current location information determined by the GPS sensor 130, the image taken after the shot pattern recognition, and the time at which the golf shot was made, It may be further recognized by the AI engine 195 and further include the club number used for the golf shot. The general-purpose processor 191 may further store the club number recognized through the AI engine 195 in the candidate shot information.

설계 예에 따라, 샷 패턴의 인식(S117)과 후속하는 이미지 촬영(S119)은 생략될 수 있다. 이에 따라 골프공의 인식(S115) 만으로도 후보 샷 정보가 생성되어 저장 가능하다. Depending on the design example, the recognition of the shot pattern ( S117 ) and the subsequent image capturing ( S119 ) may be omitted. Accordingly, candidate shot information can be generated and stored only by recognizing the golf ball ( S115 ).

트레이싱 디바이스(100)(의 범용 프로세서(191))는 현재 저장된 최신 후보 샷 정보와 직전(바로 이전)에 저장된 후보 샷 정보를 비교하고 두 후보 샷 정보의 위치 정보 사이의 차이(거리)가 지정된 거리(예를 들어, 5 m 등, 일반적으로 골프샷이 이루어진 경우의 최소 골프공 이동 거리 미만으로 설정되는 거리) 미만인 경우 직전에 저장된 후보 샷 정보를 삭제한다. The tracing device 100 (the general-purpose processor 191 of the tracing device 100) compares the latest candidate shot information currently stored with the candidate shot information stored immediately before (immediately before), and a difference (distance) between the position information of the two candidate shot information is specified. If it is less than (eg, 5 m, etc., a distance generally set to be less than the minimum golf ball movement distance when a golf shot is made), the candidate shot information stored immediately before is deleted.

이에 따라, 트레이싱 디바이스(100)의 특성상 비록 골프공의 비행을 디지털적으로(자동으로) 확인 불가능한 경우라도 위치 변화와 샷 인식을 통해 간단히 발생한 골프샷을 트레이싱 가능하도록 구성된다. Accordingly, even when the flight of the golf ball cannot be digitally (automatically) confirmed due to the characteristics of the tracing device 100, a golf shot generated simply by changing a position and recognizing a shot can be traced.

두 후보 샷 정보의 위치 정보 사이의 차이가 지정된 거리 이상인 경우, 트레이싱 디바이스(100)는 직전의 후보 샷 정보를 샷 이벤트 정보로 구성하여 메모리(150)에 저장(S123)한다. When the difference between the location information of the two candidate shot information is equal to or greater than the specified distance, the tracing device 100 configures the immediately preceding candidate shot information as shot event information and stores the information in the memory 150 ( S123 ).

범용 프로세서(191)는 직전의 후보 샷 정보의 위치 정보, 샷후 촬영 이미지, 샷 시각 및 샷거리(최신 후보 샷 정보와 직전 후보 샷 정보의 위치 정보 사이의 거리)를 포함하고 나아가 샷에 이용된 골프 클럽 번호를 더 포함하여 샷 이벤트 정보로 구성하고 메모리(150)에 저장할 수 있다. The general-purpose processor 191 includes position information of the previous candidate shot information, a post-shot shot image, a shot time, and a shot distance (distance between the latest candidate shot information and the position information of the immediately preceding candidate shot information), and further includes the golf used for the shot. It can be configured as shot event information including the club number and stored in the memory 150 .

이후, 트레이싱 디바이스(100)는 후속하는 행동 패턴이나 음성 질의 등을 처리(S103 이하 참조)할 수 있다. Thereafter, the tracing device 100 may process a subsequent behavior pattern or a voice query (refer to S103 below).

인식된 행동 패턴이 골프샷 직전에 이루어지는 준비 패턴이 아닌 경우 트레이싱 디바이스(100)는 인식된 행동 패턴이 뷰잉 패턴인지를 결정(S125)한다. When the recognized behavior pattern is not a preparation pattern made just before a golf shot, the tracing device 100 determines whether the recognized behavior pattern is a viewing pattern ( S125 ).

제어부(190)의 범용 프로세서(191)는 일련의 움직임 정보로 구성되는 행동 패턴이 뷰잉 패턴인 지를 결정하는 데, 뷰잉 패턴은 지정된 일정 시간(예를 들어, 10 초 등) 이상 트레이싱 디바이스(100)를 착용한 골퍼의 움직임이 적고 특정 방향(전방)을 향해 바라보고 있는 상태의 행동 패턴일 수 있다. The general-purpose processor 191 of the control unit 190 determines whether a behavior pattern composed of a series of motion information is a viewing pattern, and the viewing pattern is a tracing device 100 for a specified period of time (eg, 10 seconds, etc.) or longer. It may be a behavior pattern of the golfer wearing the .

뷰잉 패턴은 IMU 센서(140)로부터의 3축 가속도 센싱 데이터가 지정된 임계 데이터 이하이고 3축의 각속도 센싱 데이터 또한 지정된 임계 데이터 이하인(여기서, 3축 각속도의 임계 데이터와 3축 가속도의 임계 데이터는 동일하거나 서로 상이할 수 있음) 경우의 행동 패턴일 수 있다. 또는 뷰잉 패턴은 IMU 센서(140)로부터 결정되는 속도가 지정된 임계 속도 이하이고 3축의 각속도가 지정된 임계 각속도 이하인 행동 패턴일 수 있다. 적어도 뷰잉 패턴은 골퍼의 움직임이 없고 골퍼가 하측(아래측)을 바라보지 않고 골프 필드를 향해 바라보고 있는 상태를 나타내는 행동 패턴일 수 있다. The viewing pattern indicates that the 3-axis acceleration sensing data from the IMU sensor 140 is less than or equal to the specified threshold data and the 3-axis angular velocity sensing data is also less than or equal to the specified threshold data (here, the threshold data of the 3-axis angular velocity and the threshold data of the 3-axis acceleration are the same or may be different from each other). Alternatively, the viewing pattern may be a behavior pattern in which the speed determined from the IMU sensor 140 is less than or equal to a specified threshold speed and the angular velocity of the three axes is less than or equal to the specified critical angular velocity. At least, the viewing pattern may be a behavior pattern indicating a state in which there is no movement of the golfer and the golfer is looking toward the golf field without looking down (lower side).

뷰잉 패턴인 아닌 경우, 트레이싱 디바이스(100)는 다른 행동 패턴 매칭을 시도하거나 후속하는 행동 패턴이나 음성 질의 등을 처리(S103 이하)할 수 있다. If it is not a viewing pattern, the tracing device 100 may attempt to match another behavior pattern or process a subsequent behavior pattern or voice query (S103 or less).

트레이싱 디바이스(100)(의 범용 프로세서(191))는 결정된 행동 패턴이 뷰잉 패턴인 경우 카메라 센서(160)를 제어하여 이미지를 촬영(S127)하고 촬영된 이미지 또는 일련의 연속적인 이미지들의 동영상을 촬영 지점의 현재 위치 정보, 촬영 시각과 함께 메모리(150)에 저장(S129)한다. When the determined behavior pattern is a viewing pattern, the tracing device 100 (general purpose processor 191) controls the camera sensor 160 to take an image (S127) and shoots a video of the captured image or a series of continuous images It is stored in the memory 150 together with the current location information of the point and the shooting time (S129).

단계 S129를 통해 뷰잉 패턴 인식에 따라 메모리(150)에 저장되는 이미지들은 골프 라운딩을 기념하기 위한 비디오 로그(Video Log : Vlog) 구성에 이용된다. 뷰잉 패턴에 따라 촬영된 이미지는 골퍼의 움직임이 없고 전방을 향한 상태에서 촬영되어 촬영되는 이미지는 흔들림이 적고 골프장의 풍경 등을 담을 수 있다. 비디오 로그는 같이 골프 라운딩을 즐긴 골퍼들의 여러 트레이싱 디바이스(100)의 메모리(150)에 저장되어 있는 이미지들의 조합으로 구성될 수 있다. The images stored in the memory 150 according to the viewing pattern recognition through step S129 are used to configure a video log (Vlog) to commemorate a round of golf. The image taken according to the viewing pattern is taken with no movement of the golfer and the image taken with the golfer facing forward has less shaking and can capture the scenery of the golf course. The video log may be composed of a combination of images stored in the memory 150 of several tracing devices 100 of golfers who enjoy a round of golf together.

저장 과정에서 트레이싱 디바이스(100)(의 범용 프로세서(191))는 촬영된 이미지를 필터링할 수 있다. 예를 들어, 범용 프로세서(191)는 AI 엔진(195)을 구동하고 촬영된 이미지를 AI 엔진(195)으로 제공하여 촬영된 이미지에서 물체 인식 결과를 AI 엔진(195)으로부터 수신하고 물체가 인식되는 경우, 촬영된 이미지를 메모리(150)에 저장하고 물체가 인식되지 않은 이미지는 제거할 수 있다. 인식 가능한 물체는 예를 들어, 골퍼(사람), 나무, 들판, 호수, 바다, 산 등 일 수 있다. In the storage process, the tracing device 100 (the general-purpose processor 191 of) may filter the captured image. For example, the general-purpose processor 191 drives the AI engine 195 and provides a photographed image to the AI engine 195 to receive an object recognition result from the photographed image from the AI engine 195, and the object is recognized. In this case, the captured image may be stored in the memory 150 , and an image in which an object is not recognized may be removed. The recognizable object may be, for example, a golfer (person), a tree, a field, a lake, the sea, a mountain, and the like.

이미지의 저장 이후에, 트레이싱 디바이스(100)는 후속하는 행동 패턴이나 음성 질의 등을 처리(S103 이하)할 수 있다. After the image is stored, the tracing device 100 may process a subsequent behavior pattern or voice query (S103 or less).

도 3의 제어 흐름을 통해, 트레이싱 디바이스(100)는 저전력의 IMU 센서(140)를 통한 특정 행동 패턴에 따라 전력 소비가 높은 AI 엔진(195)을 최소한 구동하여 높은 정확도를 가지면서 골프 라운딩의 이력을 알 수 있는 샷 이벤트나 영상(정지영상, 동영상)을 촬영하고 기록할 수 있다. Through the control flow of FIG. 3 , the tracing device 100 operates the AI engine 195 with high power consumption according to a specific behavior pattern through the low-power IMU sensor 140 at a minimum to have high accuracy while maintaining a golfing history It is possible to shoot and record a shot event or video (still image, video) that can be identified.

도 4는 골프장의 특정 홀 코스에서 트레이싱 디바이스(100)를 통해 골퍼와 인터페이스하고 골프 플레이를 트레이싱하는 일 사용예를 나타내는 도면이다.4 is a diagram illustrating an example of using an interface with a golfer through the tracing device 100 and tracing a golf play in a specific hole course of a golf course.

모자나 선글라스 등에 트레이싱 디바이스(100)를 착용한 골퍼는 특정 N번(N은 1에서 18 사이의 숫자임) 홀 코스의 티잉구역에서 티업(도 4의 ⓐ 참조)을 통해 N번 홀에서의 골프 플레이를 시작할 수 있다. A golfer wearing the tracing device 100 such as a hat or sunglasses plays golf on the Nth hole through a tee-up (refer to ⓐ in FIG. You can start playing.

골퍼는 티업 하기전 골퍼가 주로 하는 사전 준비 행동을 한다. 준비 행동은 골퍼별로 상이할 수 있으나 골프 클럽을 내리고 준비 자세(예를 들어, 양발을 어깨너비 이상 벌리고 아래를 바라보는 자세 등) 취하는 행동 등일 수 있다. Before the tee-up, the golfer performs the preparatory action that golfers usually do. The preparatory action may be different for each golfer, but may be an action of lowering the golf club and taking a ready posture (eg, looking down with both feet shoulder-width apart and looking down, etc.).

트레이싱 디바이스(100)(의 범용 프로세서(191))는 골퍼의 준비 행동에 따른 행동 패턴을 인식하고 내부 메모리(150)에 저장되어 있는 여러 준비 패턴 중 하나의 준비 패턴과의 일치 여부에 따라 일치하는 경우 AI 엔진(195)을 구동하고 샷 패턴 인식에 따라 후보 샷 정보를 메모리(150)에 저장한다. The tracing device 100 (the general-purpose processor 191 of) recognizes a behavior pattern according to the golfer's preparation behavior and matches according to whether it matches one preparation pattern among several preparation patterns stored in the internal memory 150 In this case, the AI engine 195 is driven and candidate shot information is stored in the memory 150 according to shot pattern recognition.

트레이싱 디바이스(100)(의 범용 프로세서(191))는 티잉구역에서 여러 번의 준비 행동에 따라 여러 개의 후보 샷 정보를 생성할 수 있다. 트레이싱 디바이스(100)(의 범용 프로세서(191))는 티잉구역에서의 여러 후보 샷 정보(지정된 거리 미만의 후보 샷 정보) 중 가장 최신(마지막)의 후보 샷 정보만을 메모리(150)에 남기고 나머지 이전의 후보 샷 정보는 삭제할 수 있다. The tracing device 100 (the general-purpose processor 191 of) may generate a plurality of pieces of candidate shot information according to several preparation actions in the teeing area. The tracing device 100 (the general-purpose processor 191 of the teeing area) leaves only the most recent (last) candidate shot information among various candidate shot information (candidate shot information less than a specified distance) in the teeing area in the memory 150, and the remaining previous Candidate shot information of can be deleted.

한편, 다른 조원의 골퍼가 티업을 하는 경우, 특정 조원의 골퍼는 다른 조원의 티업 모습을 바라보거나 홀 코스를 바라볼 수 있다. 특정 조원의 골퍼의 트레이싱 디바이스(100)는 뷰잉 패턴을 인식하고 이미지를 촬영하여 저장할 수 있다. On the other hand, when a golfer of another team member is teeing up, the golfer of a specific team member can look at the tee-up of another team member or look at the hole course. The tracing device 100 of a specific group of golfers may recognize a viewing pattern, capture an image, and store it.

모든 조원의 티업이 끝난 후 조원들은 다음 샷장소로 이동한다. 이동 과정에서 트레이싱 디바이스(100)는 일정 수준 이상의 움직임 인식에 따라 뷰잉 패턴을 인식하지 못할 수 있고 그에 따른 사진 촬영도 이루어지지 않을 수 있다. After all team tee-ups are finished, the team members move to the next shot location. In the course of movement, the tracing device 100 may not recognize the viewing pattern according to movement recognition of a certain level or higher, and thus may not take a picture.

다음 샷장소(도 4의 ⓑ)에서 골퍼는 음성을 통해 남은 거리를 질의하거나 추천 클럽을 트레이싱 디바이스(100)에 질의할 수 있다. 트레이싱 디바이스(100)는 트레이싱 디바이스(100)가 위치하는 현재 위치로부터 홀까지의 거리를 골프장 정보(홀별 위치 영역 정보)를 이용하여 산출하고 음성으로 출력하거나 골퍼의 골프 특성 정보를 이용하여 골프 클럽을 음성으로 추천할 수 있다. At the next shot location (ⓑ in FIG. 4 ), the golfer may inquire about the remaining distance or a recommended club to the tracing device 100 through voice. The tracing device 100 calculates the distance from the current location where the tracing device 100 is located to the hole using golf course information (location area information for each hole) and outputs a voice or golf club using golf characteristic information of a golfer. It can be recommended by voice.

장소 ⓑ에서, 골퍼는 두 번째 샷을 위한 준비 행동을 할 수 있고 트레이싱 디바이스(100)는 준비 패턴의 인식에 따라 후보 샷 정보를 생성할 수 있다. 트레이싱 디바이스(100)는 장소 ⓑ에서 첫 번째 후보 샷 정보가 생성됨에 따라, 티잉구역의 최종 후보 샷 정보와 거리 차이를 인식하고 티잉구역의 최종 후보 샷 정보에 기초한 샷 이벤트 정보를 생성하여 메모리(150)에 저장한다. At the place ⓑ, the golfer may prepare for the second shot and the tracing device 100 may generate candidate shot information according to the recognition of the preparation pattern. As the first candidate shot information is generated at the place ⓑ, the tracing device 100 recognizes the distance difference from the final candidate shot information of the teeing area, and generates shot event information based on the final candidate shot information of the teeing area to the memory 150 ) is stored in

샷 이벤트 정보는 위치 정보, 이미지, 샷 시각, 샷거리(티잉구역의 최종 후보 샷 정보의 위치 정보와 장소 ⓑ의 첫 번째 후보 샷 정보의 위치 정보 사이의 거리)를 포함하고 골프 클럽 번호를 더 포함할 수 있다. The shot event information includes location information, image, shot time, and shot distance (the distance between the location information of the final candidate shot information of the teeing area and the location information of the first candidate shot information of the place ⓑ) and further includes a golf club number can do.

장소 ⓑ에서도, 골퍼는 여러 개의 후보 샷 정보를 생성할 수 있고 정보 간의 거리에 따라 최종 후보 샷 정보를 제외한 나머지 정보는 삭제될 수 있다. 한편, 골퍼는 필드 등의 풍경을 바라볼 수 있다. 트레이싱 디바이스(100)는 골퍼의 행동 패턴이 뷰잉 패턴인 경우 사진(이미지)을 촬영하여 메모리(150)에 저장할 수 있다. Even at location ⓑ, the golfer may generate multiple pieces of candidate shot information, and information other than the final candidate shot information may be deleted according to the distance between the pieces of information. On the other hand, the golfer can look at the scenery such as the field. When the behavior pattern of the golfer is the viewing pattern, the tracing device 100 may take a photo (image) and store it in the memory 150 .

장소 ⓒ 및 ⓓ에서도 장소 ⓑ에서와 동일하거나 유사한 기능을 트레이싱 디바이스(100)가 수행한다. 홀이 있는 장소 ⓔ에서 트레이싱 디바이스(100)는 카메라 센서(160)를 통해 홀컵을 인식하거나 트레이싱 디바이스(100)의 현재 위치가 홀컵과 임계 거리 이내인 경우에 장소 ⓔ에서 생성된 최종 후보 샷 정보를 샷 이벤트 정보로 메모리(150)에 저장할 수 있다. In places ⓒ and ⓓ, the tracing device 100 performs the same or similar function as in places ⓑ. In the place where there is a hole ⓔ, the tracing device 100 recognizes the hole cup through the camera sensor 160 or when the current position of the tracing device 100 is within a critical distance from the hole cup, the final candidate shot information generated in the place ⓔ It may be stored in the memory 150 as shot event information.

트레이싱 디바이스(100)는 IMU 센서(140)를 이용하여 골프장의 1홀부터 9홀(또는 18홀 또는 36홀)까지의 샷 이벤트를 기록하고 사진 촬영이 적합한 환경에서 사진이나 동영상을 기록할 수 있다. 본 발명에서의 이미지 촬영은 사진(정지영상) 촬영 또는 동영상 촬영을 나타낸다.The tracing device 100 may record a shot event from the 1st hole to the 9th hole (or 18 hole or 36 hole) of a golf course using the IMU sensor 140 and record a picture or a video in an environment suitable for photographing. . In the present invention, image capturing refers to photo (still image) capturing or moving picture capturing.

골프장에서 골프 플레이가 종료 된 후, 골프장의 프런트 등에 설치되는 사용자 단말(200)은 하나 이상의 트레이싱 디바이스(100)(조원들의 트레이싱 디바이스(100)들)에서 뷰잉 패턴 인식에 따라 촬영된 이미지(사진 또는 동영상)들을 추출하고 추출된 이미지를 조합하여 비디오 로그(Vlog)를 구성하여 골퍼들 각각의 사용자 단말(200)(스마트폰 등)로 전달될 수 있다. After golf play is finished on the golf course, the user terminal 200 installed in the front of the golf course, etc., is an image (photo or video) and combining the extracted images to form a video log (Vlog), which may be transmitted to the user terminal 200 (smartphone, etc.) of each golfer.

도 5는 트레이싱 서버(300)의 예시적인 블록도를 나타내는 도면이다.5 is a diagram illustrating an exemplary block diagram of a tracing server 300 .

도 5에 따르면 트레이싱 서버(300)는 통신 유닛(310), 저장 유닛(330), 연결 유닛(350) 및 제어 유닛(370)을 포함한다. 도 5의 블록도는 기능 블록도로서 트레이싱 서버(300)는 각각의 기능을 수행하기 위한 다양한 물리적 구성을 가질 수 있다. 트레이싱 서버(300)는 다수의 물리적 서버로 분할 구성되거나 클라우드 서버 등으로 구성되거나 할당된 기능에 따라 분리 구성될 수 있다.According to FIG. 5 , the tracing server 300 includes a communication unit 310 , a storage unit 330 , a connection unit 350 , and a control unit 370 . The block diagram of FIG. 5 is a functional block diagram, and the tracing server 300 may have various physical configurations for performing each function. The tracing server 300 may be divided into a plurality of physical servers, configured as a cloud server, etc., or may be configured separately according to assigned functions.

도 5를 통해 각 기능 블록을 살펴보면, 통신 유닛(310)은 인터넷을 통해 데이터를 송수신한다. 통신 유닛(310)은 무선랜, 유선랜, 광랜 등에 연결되기 위한 통신 칩셋을 포함하여 각종 데이터를 송수신할 수 있다. Referring to each functional block through FIG. 5 , the communication unit 310 transmits and receives data through the Internet. The communication unit 310 may transmit/receive various data including a communication chipset for connection to a wireless LAN, a wired LAN, an optical LAN, or the like.

예를 들어, 통신 유닛(310)은 IMU 센서(140)로부터 행동 패턴을 인식하고 인식된 행동 패턴에 따라 카메라 센서(160)를 구동하여 이미지를 촬영하는 트레이싱 디바이스(100)에 저장되어 있는 복수의 샷 이벤트 정보를 수신할 수 있다. 통신 유닛(310)은 트레이싱 디바이스(100)가 연결된 사용자 단말(200)을 통해 복수의 샷 이벤트 정보를 수신할 수 있다. For example, the communication unit 310 recognizes a behavior pattern from the IMU sensor 140 and drives the camera sensor 160 according to the recognized behavior pattern to capture a plurality of images stored in the tracing device 100 . It is possible to receive shot event information. The communication unit 310 may receive a plurality of shot event information through the user terminal 200 to which the tracing device 100 is connected.

또한, 통신 유닛(310)은 사용자 단말(200)을 통해 각종 요청을 수신하고 수신된 요청에 대한 응답을 사용자 단말(200)로 전송할 수 있다. Also, the communication unit 310 may receive various requests through the user terminal 200 and transmit a response to the received request to the user terminal 200 .

저장 유닛(330)은 각종 데이터를 저장한다. 저장 유닛(330)은 하드디스크 등의 대용량 저장 매체를 포함하여 골퍼의 사용 이력과 골퍼의 특성을 알 수 있는 사용자 DB 등을 저장한다. The storage unit 330 stores various data. The storage unit 330 includes a large-capacity storage medium such as a hard disk and stores a golfer's usage history and a user DB for knowing the golfer's characteristics.

사용자 DB는 복수의 사용자 아이템을 포함하여 구성된다. 사용자 아이템은 특정 골퍼의 골프 플레이 이력과 골퍼의 골프 플레이 특성 등의 정보를 저장하도록 구성된다. 사용자 아이템은 사용자 ID와 패스워드를 포함하고 하나 이상의 골프 이력 정보와 골프 특성 정보를 포함하여 구성된다. The user DB is configured to include a plurality of user items. The user item is configured to store information such as a golf play history of a specific golfer and golf play characteristics of the golfer. The user item includes a user ID and password and is configured to include one or more golf history information and golf characteristic information.

골프 이력 정보는 사용자(골퍼)의 특정 골프장에서의 라운딩을 특정하고 라운딩에서의 샷 히스토리(내역)를 알 수 있도록 구성된 정보이다. 골프 이력 정보는 골프장 ID, 이용 일시를 포함하고 각각의 홀에 맵핑된 하나 이상의(복수의) 샷 이벤트 정보를 포함한다. 골프 이력 정보에 저장되는 샷 이벤트 정보는 통신 유닛(310)을 통해 수신되는 샷 이벤트 정보와 반드시 동일할 필요는 없고 설계 예에 따라 일부는(예를 들어, 샷거리) 생략 저장될 수도 있다. 골프 이력 정보는 뷰잉 패턴의 인식에 따라 저장된 위치 정보 및 촬영 이미지를 더 포함하여 구성될 수 있다. The golf history information is information configured to specify a round of a user (golfer) at a specific golf course and to know a shot history (detail) in the round. The golf history information includes a golf course ID, use date and time, and includes one or more (a plurality of) shot event information mapped to each hole. The shot event information stored in the golf history information is not necessarily the same as the shot event information received through the communication unit 310, and a part (eg, shot distance) may be omitted and stored according to a design example. The golf history information may be configured to further include location information and a photographed image stored according to the recognition of the viewing pattern.

골프 특성 정보는 골퍼의 골프 플레이 특성을 저장하는 데, 예를 들어, 골프채 클럽 번호별 골퍼의 평균 샷거리를 포함할 수 있다. 골프 특성 정보는 사용자 단말(200)을 통해 트레이싱 디바이스(100)에 다운로드 될 수 있다. The golf characteristic information stores the golf play characteristics of the golfer, and may include, for example, the average shot distance of the golfer for each golf club and club number. The golf characteristic information may be downloaded to the tracing device 100 through the user terminal 200 .

저장 유닛(330)은 골프장 ID에 맵핑된 골프장 지도를 더 포함할 수 있다. 골프장 지도는 해당 골프장의 홀 코스 지도들을 하나 이상 포함하여 구성될 수 있다. The storage unit 330 may further include a golf course map mapped to the golf course ID. The golf course map may be configured to include one or more hole course maps of the corresponding golf course.

연결 유닛(350)은 트레이싱 서버(300)내의 블록 사이의 각종 데이터를 송수신한다. 연결 유닛(350)은 병렬 버스, 시리얼 버스, 이더넷, 와이파이 등을 하나 이상 포함하여 각종 데이터를 송수신할 수 있다. The connection unit 350 transmits and receives various data between blocks in the tracing server 300 . The connection unit 350 may transmit/receive various data including one or more of a parallel bus, a serial bus, Ethernet, Wi-Fi, and the like.

제어 유닛(370)은 트레이싱 서버(300)를 제어한다. 제어 유닛(370)은 저장 유닛(330)에 더 저장되어 있는 하나 이상의 프로그램을 통해 트레이싱 서버(300)를 제어할 수 있다. 제어 유닛(370)은 CPU, MPU, 중앙 처리 장치, 마이컴 등을 하나 이상 포함하여 프로그램의 명령어 코드를 수행할 수 있다. The control unit 370 controls the tracing server 300 . The control unit 370 may control the tracing server 300 through one or more programs further stored in the storage unit 330 . The control unit 370 may include one or more of a CPU, an MPU, a central processing unit, a microcomputer, and the like to execute an instruction code of a program.

제어 유닛(370)에서 이루어지는 몇몇 제어를 살펴보면, 제어 유닛(370)은 골퍼(사용자) 로그인을 통해 사용자 단말(200)의 액세스를 허용하고 사용자 DB에서 로그인(사용자 ID 및 패스워드)에 대응하는 사용자 아이템을 검색한다. Looking at some controls made in the control unit 370, the control unit 370 allows access of the user terminal 200 through a golfer (user) login and a user item corresponding to the login (user ID and password) in the user DB. search for

제어 유닛(370)은 통신 유닛(310)을 통해 골프 이력 정보 업로딩 요청을 수신하고 업로딩 요청에 포함되거나 후속하는 홀별 복수의 샷 이벤트 정보(사용자 단말(200)을 통해 트레이싱 디바이스(100)에 저장되어 있는 정보)를 수신한다. 제어 유닛(370)은 사용자 아이템에 신규의 골프 이력 정보를 생성하고 골프장 ID(샷 이벤트 정보의 위치 정보로부터 자동 설정되거나 사용자 입력에 따라 설정 가능함)와 이용 일시를 설정하고 홀별 샷 이벤트 정보들을 수신된 샷 이벤트 정보로부터 구성한다. The control unit 370 receives the golf history information uploading request through the communication unit 310, and a plurality of shot event information for each hole included in the uploading request or following is stored in the tracing device 100 through the user terminal 200. information) is received. The control unit 370 generates new golf history information in the user item, sets a golf course ID (automatically set from location information of shot event information or can be set according to a user input) and use date and time, and receives shot event information for each hole. Constructed from shot event information.

제어 유닛(370)은 수신되는 샷 이벤트 정보로부터 사용자 아이템의 골프 특성 정보를 갱신한다. 제어 유닛(370)은 수신되는 샷 이벤트 정보들의 골프 클럽 번호와 샷거리를 이용하여 골프 특성 정보의 클럽 번호별 평균 샷거리를 갱신할 수 있다. 여기서, 수신되는 특정 샷거리는 평균 샷거리 계산에 이용되지 않을 수 있다. 예를 들어, 특정 클럽의 특정 샷거리와 해당 특정 클럽의 기존 평균 샷거리와의 비율(오차율)이 임계 비율 이하나 이상 차이(예를 들어, 50% 미만, 50% 이상)가 있는 경우 특정 샷거리는 평균 샷거리의 산출에 이용되지 않을 수 있다. 이와 같이, 제어 유닛(370)은 골퍼의 실제 측정된 샷거리를 이용하여 사용자별 특화된 클럽별 평균 거리를 산출하고 사용자 단말(200)이나 트레이싱 디바이스(100)를 통해 골퍼에게 안내할 수 있다. The control unit 370 updates the golf characteristic information of the user item from the received shot event information. The control unit 370 may update the average shot distance for each club number in the golf characteristic information by using the golf club number and the shot distance of the received shot event information. Here, the received specific shot distance may not be used for calculating the average shot distance. For example, if the ratio (error rate) between a specific shot distance for a specific club and the existing average shot distance for that specific club is less than or equal to a critical ratio (e.g. less than 50%, more than 50%), a specific shot The distance may not be used to calculate the average shot distance. In this way, the control unit 370 may calculate an average distance for each club specialized for each user by using the actual measured shot distance of the golfer, and guide the golfer through the user terminal 200 or the tracing device 100 .

제어 유닛(370)은 생성된 골프 이력 정보 및 갱신된 골프 특성 정보를 저장 유닛(330)의 사용자 아이템에 저장할 수 있다. 제어 유닛(370)은 샷 이벤트 정보들과 함께 뷰잉 패턴의 인식에 따라 구성되는 촬영 이미지 및 대응하는 위치 정보를 사용자 단말(200)로부터 수신하여 골프 이력 정보에 더 저장할 수 있다. The control unit 370 may store the generated golf history information and the updated golf characteristic information in a user item of the storage unit 330 . The control unit 370 may receive the shot image configured according to the recognition of the viewing pattern along with the shot event information and the corresponding location information from the user terminal 200 and further store the received image in the golf history information.

웹 서버나 앱 서버로 동작하는 트레이싱 서버(300)의 제어 유닛(370)은 액세스한 사용자 단말(200)로부터 수신되는 요청(request)에 따라 각종 응답을 통신 유닛(310)을 통해 출력할 수 있다. The control unit 370 of the tracing server 300 operating as a web server or app server may output various responses through the communication unit 310 according to a request received from the accessed user terminal 200 . .

예를 들어, 제어 유닛(370)은 사용자 단말(200)로부터 골프 이력 조회 요청을 수신할 수 있다. 골프 이력 조회 요청은 사용자 단말(200)에 의해 선택되고 골프장 ID와 라운딩 일시로 특정되거나 사용자 단말(200)에 표시되는 이미 골프 플레이가 이루어진 라운딩 이벤트 표시 중 하나의 선택으로 특정될 수 있다. 또는 골프 이력 조회 요청은 골프장 ID와 홀번호로 특정될 수 도 있다.For example, the control unit 370 may receive a golf history inquiry request from the user terminal 200 . The golf history inquiry request may be selected by the user terminal 200 and specified as a golf course ID and round date and time, or may be specified by selection of one of a rounding event display in which golf has been played already displayed on the user terminal 200 . Alternatively, the golf history inquiry request may be specified by the golf course ID and hole number.

골프 이력 조회 요청의 수신에 따라, 제어 유닛(370)은 로그인한 사용자의 사용자 아이템에서 조회 요청이 이루어진 골프 이력 정보를 검색하고 골프장 지도에 골프 이력 정보를 맵핑하여 사용자 단말(200)로 전송한다. Upon reception of the golf history inquiry request, the control unit 370 searches for the golf history information for which the inquiry request is made from the user item of the logged-in user, maps the golf history information to the golf course map, and transmits it to the user terminal 200 .

사용자 단말(200)로 전송되고 골프장 지도에 맵핑되는 골프 이력 정보는 골프장 지도에 표시 가능한 홀별 복수의 샷 위치 정보와 샷 위치에서 촬영된 이미지를 포함하여 사용자 단말(200)의 디스플레이에 이미지로 표시 가능하도록 구성된다. 또는 골프장 지도에 맵핑되는 골프 이력 정보는 골퍼에 의해 선택된 홀 코스의 지도에 복수의 샷 위치 정보 및 촬영된 이미지를 포함하여 사용자 단말(200)로 전송되어 디스플레이 이미지로 표시 가능하다. Golf history information transmitted to the user terminal 200 and mapped to the golf course map may be displayed as an image on the display of the user terminal 200, including a plurality of shot location information for each hole that can be displayed on the golf course map, and an image taken at the shot location is configured to Alternatively, the golf history information mapped to the golf course map may be transmitted to the user terminal 200 including a plurality of shot location information and a photographed image on the map of the hole course selected by the golfer and displayed as a display image.

골프 이력 정보의 수신에 따라, 사용자 단말(200)은 골프장 지도(홀 코스)에 샷 위치를 아이콘 등의 이미지로 표시(도 4 참조)하고 샷 위치 근처에 이미지 아이콘을 표시할 수 있다. 사용자 단말(200)의 골퍼는 이미지 아이콘의 선택시에 해당 위치에서의 샷 후 모습을 나타내는 촬영 이미지를 팝업창으로 표시할 수 있다. 팝업창으로 표시되는 촬영 이미지는 사용자 단말(200) 또는 트레이싱 서버(300)에 의해 삽입되는 골프공의 이동동선의 표시를 가질 수 있다. 사용자 단말(200) 또는 트레이싱 서버(300)는 해당 위치에서의 샷거리와 다음(후속) 샷의 위치와의 상대적인 방향에 따라 현재 샷의 이미지에 골프공의 이동동선을 삽입할 수 있다. According to the reception of the golf history information, the user terminal 200 may display the shot position as an image such as an icon on the golf course map (hole course) (see FIG. 4 ) and display the image icon near the shot position. When the golfer of the user terminal 200 selects the image icon, the shot image indicating the post-shot appearance at the corresponding location may be displayed in a pop-up window. The photographed image displayed in the pop-up window may have an indication of the movement line of the golf ball inserted by the user terminal 200 or the tracing server 300 . The user terminal 200 or the tracing server 300 may insert the movement line of the golf ball into the image of the current shot according to the relative direction between the shot distance at the corresponding position and the position of the next (following) shot.

이와 같은 과거 골프 이력을 사용자 단말(200)로 전송함으로써, 골퍼는 과거 특정 골프장에서의 골프 플레이나 특정 홀 코스에서의 골프 플레이를 확인 가능하다.By transmitting the past golf history to the user terminal 200 , the golfer can confirm the golf play at a specific golf course or golf play at a specific hole course in the past.

그 외, 제어 유닛(370)은 사용자 단말(200)로부터의 비디오 로그(Vlog) 생성 요청에 따라 하나 이상의 골프 이력 정보에 저장되어 있는 뷰잉 패턴의 인식에 따른 이미지를 이용하여 지정된 시간 길이(예를 들어, 1분, 3분 등)를 가지는 비디오 로그를 생성하여 사용자 단말(200)로 통신 유닛(310)을 통해 전달 가능하다. In addition, the control unit 370 uses the image according to the recognition of the viewing pattern stored in one or more golf history information in response to a video log (Vlog) generation request from the user terminal 200 (for example, For example, 1 minute, 3 minutes, etc.) can be generated and transmitted to the user terminal 200 through the communication unit 310 .

도 6은 비디오 로그 생성 장치(400)의 예시적인 블록도를 도시한 도면이다. 6 is a diagram illustrating an exemplary block diagram of an apparatus 400 for generating a video log.

비디오 로그 생성 장치(400)는 골프장 프런트에 설치되는 개인용 컴퓨터, 노트북 등이거나 골퍼가 이용하는 개인용 컴퓨터, 노트북, 스마트폰 등일 수 있다. 비디오 로그 생성 장치(400)는 바람직하게는 골프장 프런트에 설치되는 컴퓨터나 노트북일 수 있다. The video log generating apparatus 400 may be a personal computer, a laptop computer, etc. installed at the front of the golf course, or a personal computer, a laptop computer, a smart phone, etc. used by golfers. The video log generating apparatus 400 may be preferably a computer or a laptop installed at the front of the golf course.

트레이싱 디바이스(100)에 저장된 이미지나 동영상으로부터 비디오 로그를 생성 가능한 비디오 로그 생성 장치(400)는 외부 인터페이스(410), 입력 인터페이스(420), 저장매체(430), 디스플레이(440), 출력 인터페이스(450) 및 프로세서(460)를 포함한다.The video log generating apparatus 400 capable of generating a video log from an image or video stored in the tracing device 100 includes an external interface 410, an input interface 420, a storage medium 430, a display 440, an output interface ( 450 ) and a processor 460 .

비디오 로그 생성 장치(400)를 블록도를 통해 살펴보면, 외부 인터페이스(410)는 트레이싱 디바이스(100)와 인터페이싱 가능하다. 외부 인터페이스(410)는 USB 단자, USB 호스트 칩셋 등을 포함하여 트레이싱 디바이스(100)에 연결되어 트레이싱 디바이스(100)와 각종 데이터를 송수신할 수 있다. Looking at the video log generating apparatus 400 through a block diagram, the external interface 410 can interface with the tracing device 100 . The external interface 410 is connected to the tracing device 100 including a USB terminal and a USB host chipset to transmit/receive various data to and from the tracing device 100 .

입력 인터페이스(420)는 사용자 입력을 수신한다. 입력 인터페이스(420)는 키보드, 마우스, 마이크 등을 포함하여 비디오 로그 생성 장치(400)를 이용하는 사용자 입력을 수신한다. Input interface 420 receives user input. The input interface 420 receives a user input using the video log generating apparatus 400 including a keyboard, a mouse, a microphone, and the like.

저장매체(430)는 휘발성 메모리 및/또는 하드디스크 등을 포함하여 각종 데이터와 프로그램을 저장한다. 저장매체(430)는 트레이싱 디바이스(100)로부터 수신되거나 추출되는 각종 이미지나 동영상을 저장하고 비디오 로그를 생성하기 위한 비디오 로그 프로그램을 저장할 수 있다. The storage medium 430 stores various data and programs including a volatile memory and/or a hard disk. The storage medium 430 may store various images or videos received or extracted from the tracing device 100 and store a video log program for generating a video log.

디스플레이(440)는 영상 신호를 출력한다. 디스플레이(440)는 LED 디스플레이-모듈 및/또는 LCD 디스플레이-모듈 등을 포함하여 프로세서(460)로부터 수신되는 영상 데이터를 영상 신호로 출력한다. The display 440 outputs an image signal. The display 440 includes an LED display module and/or an LCD display module and outputs image data received from the processor 460 as an image signal.

출력 인터페이스(450)는 스피커, LED 등을 포함하여 사용자가 인식 가능한 신호를 출력한다. 출력 인터페이스(450)는 예를 들어, 음성 신호를 스피커를 통해 출력할 수 있다. The output interface 450 outputs a signal recognizable by a user, including a speaker, an LED, and the like. The output interface 450 may output, for example, a voice signal through a speaker.

프로세서(460)는 비디오 로그 생성 장치(400)를 제어한다. 프로세서(460)는 프로그램의 명령어를 수행할 수 있는 실행 유닛을 하나 이상 포함하여 저장매체(430)의 비디오 로그 프로그램을 수행하여 비디오 로그를 생성하고 생성된 비디오 로그를 디스플레이(440)와 출력 인터페이스(450)를 통해 출력할 수 있다. 프로세서(460)는 생성된 비디오 로그를 외부 인터페이스(410) 등을 통해 트레이싱 디바이스(100)나 USB 메모리에 저장할 수 있다. 여기서, 비디오 로그 프로그램은 인공지능을 이용하는 프로그램일 수 있다. 프로세서는 CPU, MPU, 중앙 처리 장치, 마이컴 등을 나타내거나 등으로 지칭될 수 있다. The processor 460 controls the video log generating apparatus 400 . The processor 460 includes one or more execution units capable of executing a program instruction, performs a video log program in the storage medium 430, generates a video log, and displays the generated video log with the display 440 and the output interface ( 450) can be printed. The processor 460 may store the generated video log in the tracing device 100 or the USB memory through the external interface 410 or the like. Here, the video log program may be a program using artificial intelligence. A processor may represent or be referred to as a CPU, MPU, central processing unit, microcomputer, or the like.

비디오 로그 프로그램을 수행하는 프로세서(460)는 외부 인터페이스(410)를 통해 트레이싱 디바이스(100)에 연결되고 트레이싱 디바이스(100)의 메모리(150)에 저장되어 있는 하나 이상의 이미지 및/또는 동영상을 저장매체(430)에 저장할 수 있다. 프로세서(460)는 하나 이상의(다수의) 트레이싱 디바이스(100)의 메모리(150)에 저장되어 있는 하나 이상의 이미지 및/또는 동영상을 저장매체(430)에 저장할 수 있다. The processor 460 for performing the video log program is connected to the tracing device 100 through the external interface 410 and stores one or more images and/or videos stored in the memory 150 of the tracing device 100 in a storage medium. It can be stored in (430). The processor 460 may store one or more images and/or videos stored in the memory 150 of the one or more (multiple) tracing devices 100 in the storage medium 430 .

또한, 프로세서(460)는 입력 인터페이스(420)를 통한 사용자 입력에 따라 생성될 비디오 로그의 플레이 시간(예를 들어, 1분, 3분 등) 등을 설정할 수 있다. In addition, the processor 460 may set a play time (eg, 1 minute, 3 minutes, etc.) of a video log to be generated according to a user input through the input interface 420 .

프로세서(460)는 저장매체(430)에 저장되어 있는 하나 이상의 트레이싱 디바이스(100)의 이미지 및/또는 동영상을 비디오 로그 프로그램의 인공지능 알고리즘에 따라 합성하여 자동으로 비디오 로그를 생성하고 생성된 비디오 로그를 저장매체(430)에 저장하고 외부 인터페이스(410)를 통해 외부의 메모리에 다운로드할 수 있다. The processor 460 synthesizes images and/or videos of one or more tracing devices 100 stored in the storage medium 430 according to an artificial intelligence algorithm of a video log program to automatically generate a video log and generate a video log. can be stored in the storage medium 430 and downloaded to an external memory through the external interface 410 .

외부 인터페이스(410)를 통해 비디오 로그 생성 장치(400)와 연결되는 트레이싱 디바이스(100)는 골프 라운딩시에 IMU 센서(140)에 의한 뷰잉 패턴의 인식에 따라 촬영되는 이미지나 동영상(일련의 연속적인 이미지들)을 메모리(150)에 저장하고, 프로세서(460)는 여러 트레이싱 디바이스(100)에서 뷰잉 패턴의 인식에 따라 촬영된 이미지나 동영상을 이용하여 비디오 로그를 구성한다. The tracing device 100 connected to the video log generating apparatus 400 through the external interface 410 is an image or video (a series of continuous images) are stored in the memory 150 , and the processor 460 configures a video log using images or moving pictures taken according to the recognition of the viewing patterns in the various tracing devices 100 .

비디오 로그의 구성시에, 프로세서(460)는 여러 트레이싱 디바이스(100)에 저장된 이미지나 동영상을 골프 홀 코스별로 분류(이미지나 동영상에 맵핑되어 있는 위치 정보를 이용하여 분류)하고 분류된 홀 코스별의 이미지나 동영상을 인공지능 알고리즘에 따라 선별하여 설정된 플레이 시간 내의 비디오 로그를 생성할 수 있다. When configuring the video log, the processor 460 classifies the images or videos stored in the multiple tracing devices 100 by golf hole course (classifying using location information mapped to the image or video) and classifying each hole course You can create a video log within the set play time by selecting images or videos of the game according to an artificial intelligence algorithm.

이상에서 설명한 본 발명은, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시 예 및 첨부된 도면에 의해 한정되는 것이 아니다. The present invention described above, for those of ordinary skill in the art to which the present invention pertains, various substitutions, modifications and changes are possible without departing from the technical spirit of the present invention. It is not limited by the drawings.

100 : 트레이싱 디바이스
110 : 입력부 120 : 외부 인터페이스부
130 : GPS 센서 140 : IMU 센서
150 : 메모리 160 : 카메라 센서
170 : 출력부 180 : 마이크
190 : 제어부
191 : 범용 프로세서 195 : AI 엔진
200 : 사용자 단말
300 : 트레이싱 서버
310 : 통신 유닛 330 : 저장 유닛
350 : 연결 유닛 370 : 제어 유닛
400 : 비디오 로그 생성 장치
410 : 외부 인터페이스 420 : 입력 인터페이스
430 : 저장매체 440 : 디스플레이
450 : 출력 인터페이스 460 : 프로세서
100: tracing device
110: input unit 120: external interface unit
130: GPS sensor 140: IMU sensor
150: memory 160: camera sensor
170: output unit 180: microphone
190: control unit
191: general purpose processor 195: AI engine
200: user terminal
300: tracing server
310: communication unit 330: storage unit
350: connection unit 370: control unit
400 : video log generator
410: external interface 420: input interface
430: storage medium 440: display
450: output interface 460: processor

Claims (12)

모자 또는 선글라스에 고정되는 골프 플레이 트레이싱 디바이스로서,
상기 트레이싱 디바이스의 움직임을 센싱하는 IMU 센서;
외부 이미지를 촬영하는 카메라 센서; 및
범용 프로세서와 AI 엔진을 포함하는 제어부로서, 상기 범용 프로세서는 상기 AI 엔진의 구동을 제어하고 상기 IMU 센서로부터 수신되는 센싱 데이터로부터 행동 패턴을 인식하고 인식된 행동 패턴에 따라 상기 카메라 센서를 구동하여 이미지 촬영을 제어하는, 제어부;를 포함하는,
트레이싱 디바이스.
A golf play tracing device secured to a hat or sunglasses, comprising:
an IMU sensor for sensing the movement of the tracing device;
a camera sensor that takes an external image; and
A control unit including a general-purpose processor and an AI engine, wherein the general-purpose processor controls the driving of the AI engine, recognizes a behavior pattern from sensing data received from the IMU sensor, and drives the camera sensor according to the recognized behavior pattern to obtain an image Including; a control unit for controlling the shooting;
tracing device.
제1항에 있어서,
상기 트레이싱 디바이스의 위치를 센싱하는 GPS 센서; 및
데이터를 저장하는 메모리;를 더 포함하고,
상기 범용 프로세서는 상기 IMU 센서로부터의 복수의 센싱 데이터로부터 결정되는 행동 패턴이 골프샷 전의 준비 패턴에 대응하는 경우 상기 AI 엔진을 구동하고,
상기 범용 프로세서에 의해 구동되는 상기 AI 엔진은 상기 카메라 센서로부터 수신되는 이미지에서 골프공을 인식하고 골프공 인식 결과를 출력하고,
상기 범용 프로세서는 상기 골프공 인식 결과에 따라 상기 GPS 센서로부터의 위치 정보, 상기 카메라 센서에서 촬영되는 이미지 및 샷 시각을 포함하는 후보 샷 정보를 상기 메모리에 저장하는,
트레이싱 디바이스.
According to claim 1,
a GPS sensor for sensing the position of the tracing device; and
Memory for storing data; further comprising,
The general-purpose processor drives the AI engine when a behavior pattern determined from a plurality of sensing data from the IMU sensor corresponds to a preparation pattern before a golf shot,
The AI engine driven by the general-purpose processor recognizes a golf ball in the image received from the camera sensor and outputs a golf ball recognition result,
The general-purpose processor stores candidate shot information including location information from the GPS sensor, an image captured by the camera sensor, and a shot time in the memory according to the golf ball recognition result,
tracing device.
제2항에 있어서,
상기 범용 프로세서는 골프공 인식에 후속하여 상기 IMU 센서로부터의 복수의 센싱 데이터를 통해 샷 패턴을 인식하고 샷 패턴의 인식에 후속하여 상기 카메라 센서를 제어하여 이미지를 촬영하여 상기 후보 샷 정보에 저장하고 상기 AI 엔진의 구동을 중단하며,
상기 범용 프로세서는 최신 후보 샷 정보와 직전 후보 샷 정보의 위치 정보 차이가 지정된 거리 이상인 경우 최신 후보 샷 정보 직전의 후보 샷 정보를 샷 이벤트 정보로 메모리에 저장하는,
트레이싱 디바이스.
3. The method of claim 2,
The general-purpose processor recognizes a shot pattern through a plurality of sensing data from the IMU sensor following recognition of a golf ball, and controls the camera sensor following recognition of the shot pattern to capture an image and store it in the candidate shot information, Stop the AI engine from running,
The general-purpose processor stores candidate shot information immediately before the latest candidate shot information as shot event information in a memory when a difference in position information between the latest candidate shot information and the immediately preceding candidate shot information is greater than or equal to a specified distance;
tracing device.
제2항에 있어서,
상기 범용 프로세서는 상기 IMU 센서로부터의 복수의 센싱 데이터로부터 결정되는 행동 패턴이 뷰잉 패턴인 경우 상기 카메라 센서를 구동하여 촬영되는 이미지를 상기 메모리에 저장하고,
뷰잉 패턴 판단에 따라 상기 메모리에 저장되는 하나 이상의 이미지는 다른 트레이싱 디바이스의 이미지와 함께 비디오 로그 구성에 이용되고,
상기 뷰잉 패턴은 지정된 시간 동안에 상기 IMU 센서로부터의 3축 가속도 센싱 데이터가 지정된 제1 임계 데이터 이하이고 3축 각속도 센싱 데이터가 지정된 제2 임계 데이터 이하인 경우의 행동 패턴인,
트레이싱 디바이스.
3. The method of claim 2,
The general-purpose processor stores an image captured by driving the camera sensor in the memory when a behavior pattern determined from a plurality of sensing data from the IMU sensor is a viewing pattern,
One or more images stored in the memory according to the determination of the viewing pattern are used to compose a video log together with images of other tracing devices,
The viewing pattern is a behavior pattern when the 3-axis acceleration sensing data from the IMU sensor is less than or equal to the specified first threshold data and the 3-axis angular velocity sensing data is less than or equal to the specified second threshold data for a specified time,
tracing device.
제2항에 있어서,
음성신호를 수신하는 마이크; 및
스피커를 포함하는 출력부;를 더 포함하고,
상기 범용 프로세서는 상기 마이크로부터의 음성 데이터의 수신에 따라 상기 AI 엔진을 구동하고 상기 AI 엔진으로 골프장 정보, 현재 위치 정보 및 음성 데이터를 제공하고 상기 AI 엔진으로부터 수신되는 응답 데이터를 상기 출력부로 출력하는,
트레이싱 디바이스.
3. The method of claim 2,
a microphone for receiving a voice signal; and
An output unit including a speaker; further comprising,
The general-purpose processor drives the AI engine according to the reception of the voice data from the microphone, provides golf course information, current location information, and voice data to the AI engine, and outputs response data received from the AI engine to the output unit ,
tracing device.
제5항에 있어서,
상기 범용 프로세서에 의해 구동되는 상기 AI 엔진은 상기 카메라 센서로부터 수신되는 이미지에서 클럽 번호를 인식하고,
상기 범용 프로세서는 샷 패턴의 인식에 후속하여 구성되는 상기 후보 샷 정보에 인식된 클럽 번호를 더 저장하고,
상기 AI 엔진은 상기 음성 데이터로부터의 클럽 선택 요청에 따라 상기 범용 프로세서에 의해 더 제공되는 사용자 골프 특성 정보에 따라 선택되는 클럽 번호를 포함하는 응답 데이터를 출력하는,
트레이싱 디바이스.
6. The method of claim 5,
The AI engine driven by the general-purpose processor recognizes the club number in the image received from the camera sensor,
The general-purpose processor further stores the recognized club number in the candidate shot information configured following recognition of the shot pattern;
The AI engine outputs response data including a club number selected according to user golf characteristic information further provided by the general-purpose processor in response to a club selection request from the voice data,
tracing device.
골프 플레이 트레이싱 방법으로서,
트레이싱 디바이스가 IMU 센서를 통해 움직임을 센싱하는 단계;
상기 트레이싱 디바이스가 상기 IMU 센서로부터의 센싱 데이터로부터 행동 패턴을 인식하는 단계; 및
상기 트레이싱 디바이스가 인식된 행동 패턴에 따라 카메라 센서를 구동하여 이미지를 촬영하는 단계;를 포함하고,
상기 트레이싱 디바이스는 모자 또는 선글라스에 고정되는 디바이스인,
골프 플레이 트레이싱 방법.
A golf play tracing method comprising:
Sensing, by the tracing device, a movement through an IMU sensor;
recognizing, by the tracing device, a behavior pattern from sensing data from the IMU sensor; and
Including, by the tracing device, driving a camera sensor according to the recognized behavior pattern to take an image;
The tracing device is a device fixed to a hat or sunglasses,
How to Tracing Golf Play.
제7항에 있어서,
상기 인식된 행동 패턴에 따라 이미지를 촬영하는 단계는,
상기 트레이싱 디바이스가 상기 IMU 센서로부터의 복수의 센싱 데이터로부터 결정되는 행동 패턴이 복수의 준비 패턴 중 하나의 준비 패턴에 대응하는 경우 상기 트레이싱 디바이스의 AI 엔진을 구동하는 단계;
상기 트레이싱 디바이스가 상기 AI 엔진을 통해 상기 카메라 센서로부터 수신되는 이미지에서 골프공을 인식하고 골프공 인식 결과를 생성하는 단계;
상기 골프공 인식 결과에 따라 상기 트레이싱 디바이스가 상기 IMU 센서로부터의 복수의 센싱 데이터를 통해 샷 패턴을 인식하는 단계; 및
상기 샷 패턴의 인식에 후속하여 상기 트레이싱 디바이스가 상기 카메라 센서를 제어하여 이미지를 촬영하는 단계;를 포함하는,
골프 플레이 트레이싱 방법.
8. The method of claim 7,
The step of taking an image according to the recognized behavior pattern,
driving, by the tracing device, an AI engine of the tracing device when a behavior pattern determined from a plurality of sensing data from the IMU sensor corresponds to one of a plurality of preparation patterns;
Recognizing, by the tracing device, a golf ball in the image received from the camera sensor through the AI engine, and generating a golf ball recognition result;
recognizing, by the tracing device, a shot pattern through a plurality of sensing data from the IMU sensor according to the golf ball recognition result; and
Subsequent to recognizing the shot pattern, the tracing device controls the camera sensor to capture an image; including,
How to Tracing Golf Play.
제8항에 있어서,
상기 인식된 행동 패턴에 따라 이미지를 촬영하는 단계 이후에,
상기 트레이싱 디바이스가 상기 골프공 인식 결과에 따라 GPS 센서로부터의 위치 정보, 상기 카메라 센서에서 촬영되는 이미지 및 샷 시각을 포함하는 후보 샷 정보를 저장하는 단계; 및
상기 트레이싱 디바이스가 저장되는 최신 후보 샷 정보와 직전 후보 샷 정보의 위치 정보 차이가 지정된 거리 이상인 경우 최신 후보 샷 정보 직전의 후보 샷 정보를 샷 이벤트 정보로 저장하는 단계;를 더 포함하는,
골프 플레이 트레이싱 방법.
9. The method of claim 8,
After the step of taking an image according to the recognized behavior pattern,
storing, by the tracing device, candidate shot information including location information from a GPS sensor, an image captured by the camera sensor, and a shot time according to the golf ball recognition result; and
Storing candidate shot information immediately before the latest candidate shot information as shot event information when a difference between the location information of the latest candidate shot information stored in the tracing device and the last candidate shot information is greater than or equal to a specified distance;
How to Tracing Golf Play.
제8항에 있어서,
상기 인식된 행동 패턴에 따라 이미지를 촬영하는 단계는,
상기 범용 프로세서가 상기 IMU 센서로부터의 복수의 센싱 데이터로부터 결정되는 행동 패턴이 뷰잉 패턴인 경우 상기 카메라 센서를 제어하여 이미지를 촬영하는 단계;를 더 포함하고,
상기 골프 플레이 트레이싱 방법은 상기 트레이싱 디바이스가 상기 카메라 센서를 통해 촬영된 이미지를 저장하는 단계;를 더 포함하며,
뷰잉 패턴 인식에 따라 저장되는 복수의 촬영 이미지는 비디오 로그 구성에 이용되고,
상기 뷰잉 패턴은 지정된 시간 동안에 상기 IMU 센서로부터의 3축 가속도 센싱 데이터가 지정된 제1 임계 데이터 이하이고 3축 각속도 센싱 데이터가 지정된 제2 임계 데이터 이하인 경우의 행동 패턴인,
골프 플레이 트레이싱 방법.
9. The method of claim 8,
The step of taking an image according to the recognized behavior pattern,
The general-purpose processor controls the camera sensor to take an image when the behavior pattern determined from the plurality of sensing data from the IMU sensor is a viewing pattern; further comprising,
The golf play tracing method further comprises; storing the image captured by the tracing device through the camera sensor,
A plurality of captured images stored according to the viewing pattern recognition are used for video log configuration,
The viewing pattern is a behavior pattern when the 3-axis acceleration sensing data from the IMU sensor is less than or equal to the specified first threshold data and the 3-axis angular velocity sensing data is less than or equal to the specified second threshold data for a specified time,
How to Tracing Golf Play.
IMU 센서로부터 행동 패턴을 인식하고 인식된 행동 패턴에 따라 카메라 센서를 구동하여 이미지를 촬영하는 트레이싱 디바이스에 저장된 골프장의 홀에서의 샷을 특정 가능한 복수의 샷 이벤트 정보를 수신하는 통신 유닛;
사용자 DB를 저장하는 저장 유닛; 및
상기 사용자 DB의 사용자 아이템에 수신된 복수의 샷 이벤트 정보를 이용하여 구성되는 골프 이력 정보 및 골프 특성 정보를 저장하는 제어 유닛;을 포함하고,
상기 제어 유닛은 상기 통신 유닛을 통해 사용자 단말로부터 골프 이력 조회 요청의 수신에 따라 골프장 지도에 상기 복수의 샷 이벤트 정보가 맵핑된 골프 이력 정보를 상기 사용자 단말로 전송하고,
상기 골프 이력 정보는 상기 골프장 지도에 표시 가능한 홀별 복수의 샷 위치 정보와 복수의 샷 위치에서 촬영된 이미지를 포함하여 이미지로 표시 가능한,
골프 플레이 트레이싱 서버.
a communication unit that recognizes a behavior pattern from the IMU sensor and receives a plurality of shot event information capable of specifying a shot in a hole of a golf course stored in a tracing device that takes an image by driving a camera sensor according to the recognized behavior pattern;
a storage unit for storing the user DB; and
Includes; a control unit for storing golf history information and golf characteristic information configured by using the plurality of shot event information received in the user item of the user DB;
The control unit transmits, to the user terminal, golf history information in which the plurality of shot event information is mapped to a golf course map according to reception of a golf history inquiry request from the user terminal through the communication unit,
The golf history information can be displayed as an image, including a plurality of shot location information for each hole that can be displayed on the golf course map, and images taken at a plurality of shot locations,
Golf Play Tracing Server.
제4항에 따른 하나 이상의 트레이싱 디바이스에 연결되어 상기 트레이싱 디바이스로부터 데이터 수신이 가능한 외부 인터페이스;
상기 외부 인터페이스를 통해 수신되는 트레이싱 디바이스의 이미지 또는 동영상과 비디오 로그 프로그램을 저장하는 저장매체; 및
상기 비디오 로그 프로그램을 수행하는 프로세서로서, 상기 트레이싱 디바이스의 메모리에 저장되어 있는 이미지 또는 동영상을 상기 저장매체에 저장하고 설정된 플레이 시간에 따라 상기 이미지 또는 동영상으로부터 비디오 로그를 생성하는 프로세서;를 포함하고,
상기 트레이싱 디바이스의 메모리에 저장되어 이는 이미지 또는 동영상은 골프 라운딩시에 IMU 센서에 의한 뷰잉 패턴의 인식에 따라 촬영되는 이미지나 동영상인,
비디오 로그 생성 장치.
An external interface connected to one or more tracing devices according to claim 4 to receive data from the tracing device;
a storage medium for storing an image or video of the tracing device and a video log program received through the external interface; and
a processor for executing the video log program, storing an image or moving picture stored in the memory of the tracing device in the storage medium, and generating a video log from the image or moving picture according to a set play time;
Stored in the memory of the tracing device, this image or video is an image or video shot according to the recognition of the viewing pattern by the IMU sensor during a round of golf,
Video log generator.
KR1020200071273A 2020-06-12 2020-06-12 Method, device and server for tracing golf play KR102369494B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200071273A KR102369494B1 (en) 2020-06-12 2020-06-12 Method, device and server for tracing golf play

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200071273A KR102369494B1 (en) 2020-06-12 2020-06-12 Method, device and server for tracing golf play

Publications (2)

Publication Number Publication Date
KR20210154345A true KR20210154345A (en) 2021-12-21
KR102369494B1 KR102369494B1 (en) 2022-03-04

Family

ID=79165383

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200071273A KR102369494B1 (en) 2020-06-12 2020-06-12 Method, device and server for tracing golf play

Country Status (1)

Country Link
KR (1) KR102369494B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20240027956A (en) 2022-08-24 2024-03-05 변대열 Method and system for providing history of golf rounding

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015016289A (en) * 2013-06-13 2015-01-29 ソニー株式会社 Information processing device, storage medium, and information processing method
KR20180104366A (en) 2017-03-13 2018-09-21 전유신 Mobile Golf Management System
US20200014848A1 (en) * 2014-11-03 2020-01-09 Robert John Gove Autonomous media capturing

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015016289A (en) * 2013-06-13 2015-01-29 ソニー株式会社 Information processing device, storage medium, and information processing method
US20200014848A1 (en) * 2014-11-03 2020-01-09 Robert John Gove Autonomous media capturing
KR20180104366A (en) 2017-03-13 2018-09-21 전유신 Mobile Golf Management System

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20240027956A (en) 2022-08-24 2024-03-05 변대열 Method and system for providing history of golf rounding

Also Published As

Publication number Publication date
KR102369494B1 (en) 2022-03-04

Similar Documents

Publication Publication Date Title
US11321894B2 (en) Motion control via an article of clothing
US10755466B2 (en) Method and apparatus for comparing two motions
AU2016293616B2 (en) Integrated sensor and video motion analysis method
US11182946B2 (en) Motion management via conductive threads embedded in clothing material
US9975031B2 (en) Public safety and commercial delivery management system integrating activity and event performance data collection
CN105224070B (en) Athletic activity heads-up display system and method
US20180373413A1 (en) Information processing method and apparatus, and program for executing the information processing method on computer
US11210834B1 (en) Article of clothing facilitating capture of motions
KR20190099390A (en) Method and system for using sensors of a control device to control a game
US20140278218A1 (en) Capturing and Analyzing Boardsport Maneuver Data
US20120116714A1 (en) Digital Data Processing Systems and Methods for Skateboarding and Other Social Sporting Activities
US20170312574A1 (en) Information processing device, information processing method, and program
US10441847B2 (en) Framework, devices, and methodologies configured to enable gamification via sensor-based monitoring of physically performed skills, including location-specific gamification
JP2018504802A (en) Integrated video and motion event system
US11551396B2 (en) Techniques for establishing biomechanical model through motion capture
US20210280082A1 (en) Providing Workout Recap
WO2012018914A2 (en) Digital data processing systems and methods for skateboarding and other social sporting activities
KR102369494B1 (en) Method, device and server for tracing golf play
TW202146084A (en) A portable apparatus, method, and system of golf club swing motion tracking and analysis
KR102548032B1 (en) Ai golf cart and golf system comprising the ai golf cart
JP2020099592A (en) Terminal device, imaging system, and computer program
US20230310988A1 (en) Computer-readable non-transitory storage medium having game program stored therein, game system, game apparatus, and game processing method
KR20240027956A (en) Method and system for providing history of golf rounding

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right