WO2015020466A1 - Ar 글래스를 이용한 스포츠 경기 판정 시스템 및 방법 - Google Patents

Ar 글래스를 이용한 스포츠 경기 판정 시스템 및 방법 Download PDF

Info

Publication number
WO2015020466A1
WO2015020466A1 PCT/KR2014/007345 KR2014007345W WO2015020466A1 WO 2015020466 A1 WO2015020466 A1 WO 2015020466A1 KR 2014007345 W KR2014007345 W KR 2014007345W WO 2015020466 A1 WO2015020466 A1 WO 2015020466A1
Authority
WO
WIPO (PCT)
Prior art keywords
video
referee
communication module
voice command
command
Prior art date
Application number
PCT/KR2014/007345
Other languages
English (en)
French (fr)
Inventor
한동관
Original Assignee
Han Dong Kwan
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Han Dong Kwan filed Critical Han Dong Kwan
Publication of WO2015020466A1 publication Critical patent/WO2015020466A1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/103Workflow collaboration or project management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • A63B24/0006Computerised comparison for qualitative assessment of motion sequences or the course of a movement
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • A63B24/0006Computerised comparison for qualitative assessment of motion sequences or the course of a movement
    • A63B2024/0012Comparing movements or motion sequences with a registered reference
    • A63B2024/0015Comparing movements or motion sequences with computerised simulations of movements or motion sequences, e.g. for generating an ideal template as reference to be achieved by the user

Definitions

  • the video image photographed from various angles is reproduced and read in the video analysis room, and the result is transmitted to the referee and continues to the judgment.
  • Such a method has a problem that the game must be stopped for a while and reflects the opinion of the person analyzing the video image, not the referee.
  • An object of the present invention is to provide a sports game determination system using AR glasses.
  • Another object of the present invention is to provide a sports game determination method using AR glasses.
  • Augmented-reality glass including a projector;
  • a short range communication module for a smartphone that receives a voice command or a touch command from the short range communication module for the AR glasses, and a voice command or touch command received from the short range communication module for the AR glasses to the video server, and transmits the And a mobile communication module for receiving a clip video corresponding to a voice command or a touch command, wherein the short range communication module for the smart phone transmits the clip video received from the mobile communication module to the short range communication module for the AR glasses.
  • the operation time may be configured to include a referee timer that is synchronized with the shooting time of the video stored in the video server through the short range communication module and the mobile communication module for the smart phone.
  • the video server extracts and transmits a predetermined back number, a predetermined camera number, and a clip video before a predetermined second according to the voice command, or a predetermined second predetermined according to the touch command. It may be configured to extract and send the previous clip movie.
  • the AR glasses for judgment may be configured to play the clip video received by the near-field communication module for the AR glasses in slow motion having a predetermined playback speed in accordance with a predetermined voice command of the judge.
  • a sports game determination method using AR glasses comprising: photographing and transmitting a video at each photographing angle by a plurality of video cameras installed in a stadium for photographing a game; Receiving, by the video server, the captured video and storing the received video for each video camera; An augmented-reality glass for referees receiving a voice command from a referee through a microphone or a touch command of the referee through a touch pad; Transmitting, by the AR glasses for judgment, the received voice command or touch command to the judgment smartphone by short-range communication; Receiving, by the judgment smartphone, the voice command or touch command and transmitting the received voice command or touch command to the video server by 3G / 4G mobile communication; Extracting, by the video server, a clip video corresponding to the received voice command or touch command from the stored video and transmitting the clip video to the judgment smartphone by 3G / 4G mobile communication; Receiving, by the referee smart phone, the clip video and transmitting the
  • the shooting time of the video stored in the video server may be configured to be synchronized with the operating time of the timer for judgment (timer) through the judgment smartphone.
  • the step of the AR glass receiving the clip video and projecting to the eyes of the judge using a projector the judge AR glass to the predetermined voice command of the judge in the judge's eye Can be configured to project in slow motion with a predetermined playback speed.
  • the judge makes a real-time video reading to make an accurate determination It's effective.
  • FIG. 1 is a block diagram of a sports game determination system using AR glasses according to an embodiment of the present invention.
  • FIG. 2 is a block diagram of a strike zone determination system using AR glasses according to an embodiment of the present invention.
  • FIG. 3 is a flowchart of a sport competition determination method using AR glasses according to an embodiment of the present invention.
  • the first component may be referred to as the second component, and similarly, the second component may also be referred to as the first component.
  • FIG. 1 is a block diagram of a sports game determination system using AR glasses according to an embodiment of the present invention.
  • a sports game determination system 100 (hereinafter, referred to as a sports event determination system) using AR glasses according to an embodiment of the present invention may include a plurality of video cameras 110 and a video server 120. ), The judgment AR glasses 130, the judgment smartphone 140, the judgment timer 150, and the electronic display panel 160 may be configured.
  • the sports game determination system 100 may be configured to allow a referee to read a real-time video of a situation where the decision is ambiguous through the AR glass 130 for the referee during a game, thereby reducing a determination error.
  • a referee to read a real-time video of a situation where the decision is ambiguous through the AR glass 130 for the referee during a game, thereby reducing a determination error.
  • the display board 160 is configured to allow the players and visitors to watch the video reading process of the referee, thereby ensuring the fairness of the decision and reduce the controversy of the decision. There is an advantage.
  • the video camera 110 is installed in a stadium for shooting a game, and may be arranged to shoot from various angles.
  • the video camera 110 may be provided in plural, and in the case of ball games, one or more dedicated cameras may be assigned to each player to track the movement of each player.
  • the video camera 110 assigned to each athlete is preferably configured to automatically track and shoot the athlete by a dedicated servo control program.
  • the game is not limited to football, basketball, rugby, wrestling, taekwondo and the like.
  • the video server 120 may be configured to store the video photographed by the video camera 110 for each video camera 110.
  • Video server 120 is preferably provided in the stadium.
  • the video server 120 may be configured to transmit a clip video corresponding to the voice command or touch command of the referee to the referee smart phone 140.
  • the video server 120 may be configured to receive a voice command or a touch command of the referee from the referee smart phone 140, analyze the extracted clip video, and provide the clip clip to the referee smart phone 140 again. Can be.
  • the augmented-reality glass 130 for judging includes a microphone 131, a touch pad 132, a near field communication module 133 for an AR glass, and a projector 134. It can be configured to include.
  • the referee AR glasses 130 is a kind of glasses for the referee to wear, and is configured to enable viewing of the image at the same time as the actual front gaze.
  • Google glass released by Google may be an example.
  • the microphone 131 may be configured to receive a voice command of the referee.
  • the voice command is a command for requesting the video server 120 for a video to be read by the referee.
  • the voice command may include a predetermined back number of a player, a predetermined camera number, and a time before a second that indicates how many seconds before the present image is to be viewed.
  • the video camera 110 photographing a player having a predetermined uniform number may play the situation by specifying the video camera 110 taken from a specific angle.
  • the referee may issue a voice command "10 cameras, 3 cameras, 10 seconds ago". Or it may be configured to give a voice command in the name of the player instead of the number. That is, the voice command "Lionel Messi, Camera 3, 10 seconds ago" can be issued.
  • the touch pad 132 may be configured to receive a touch command of the referee.
  • the touch pad 132 may be provided at the te part of the AR glass 130 for the referee, and may be configured to perform a predetermined command when the referee touches the hand once.
  • various commands may be programmed to be performed according to the number of touches.
  • the touch command may be configured to instruct to automatically play the video before a predetermined time from the present. That is, once touched, a command to automatically play an image from 10 seconds ago to the present may be specified.
  • the short range communication module 133 for AR glasses may be configured to transmit a voice command received through the microphone 131 or a touch command received by the touch pad 132 to the short range communication module 141 for a smartphone.
  • the projector 134 may be configured to project the clip video received from the near field communication module 133 for AR glasses to the referee's eye through a prism. It is the same as the display method of the currently released Google Glass.
  • Google Glass a small projector mounted on a frame is projected so that an image is projected at an angle of total internal reflection through an optical prism so that an image is formed on the user's eyes. It is called augmented-reality (AR) because the user can selectively view the image through the prism.
  • AR augmented-reality
  • the short range communication module 141 for a smartphone may be configured to receive a voice command or a touch command from the short range communication module 133 for an AR glass.
  • the short range communication module 141 for a smartphone may be configured to transmit a clip video received from the video server 120 to the short range communication module 133 for AR glasses in the mobile communication module 142.
  • the mobile communication module 142 may be configured to transmit a voice command or a touch command received by the local area communication module 141 for a smartphone to the video server 120.
  • the mobile communication module 142 may be configured to receive a clip video corresponding to a voice command or a touch command from the video server 120.
  • the referee timer 150 may be configured to include a timer short-range communication module 151 as a timer provided by the referee to measure a game time during a game.
  • the timer function built in the judgment smartphone 140 may be used instead of the judgment timer 150.
  • the operation time of the judgment smart phone 140 may be configured to be synchronized with the time of the video server 120.
  • the electronic display board 160 is provided in the stadium and may be configured to display a clip video of a referee as well as a player, a coaching staff, and a viewer at the same time.
  • the billboard 160 may be configured to be connected to the video server 120, and may be configured to receive and display a clip video generated according to a voice command or a touch command issued by the referee in real time.
  • the reading process of the referee can be watched as if watching TV, which is very useful for obtaining quick and easy consent and fast and fair game progress to the coaches, players or spectators of both camps.
  • the display of the electronic sign 160 is preferably configured to be made selectively according to the game progress rules or at the discretion of the referee.
  • FIG. 2 is a block diagram of a strike zone determination system using AR glasses according to an embodiment of the present invention.
  • the strike zone determination system 200 (hereinafter, referred to as a strike zone determination system) using AR glasses according to an embodiment of the present invention may be a video camera 210 and a pitcher AR glass 220. ), May be configured to include a baseball referee AR glasses 230.
  • the strike zone determination system 200 of FIG. 2 is a system specialized to accurately determine whether a pitcher's pitching ball has entered the strike zone, unlike the embodiment of FIG. Of course, the determination of a general baseball game other than the determination of the pitching ball can be used as it is.
  • the strike zone determination system 200 is configured to reduce the nausea for the strike determination of the chief referee.
  • the detailed structure is demonstrated.
  • the zoom-in video captured by the video camera 210 may be configured to be transmitted in real time to the baseball referee AR glasses 230 by a short range communication module (not shown) included in the video camera.
  • the short-range communication module is preferably a Wi-Fi module in view of the distance of the baseball field.
  • the pitcher AR glasses 220 are glasses for the pitcher to wear, since the pitcher often stares until the catcher catches the ball after pitching, it is very suitable to check whether the ball enters the strike zone accurately from the front.
  • the AR glass video camera 221 mounted on the pitcher AR glass 220 may be configured to photograph the front of the catcher after pitching.
  • either one of the video camera 210 and the pitcher AR glass 220 may be used, or both.
  • the microphone 231 may be configured to receive a voice command of the referee.
  • the video recorded by the pitcher AR glass 220 may be a command for replaying again from a predetermined second.
  • say “slow” can be a slow and replayed video.
  • the pitcher AR glass 220 can not always shoot a video, when the pitcher is ready for pitching, the referee inputs a voice command "shooting" and the pitcher AR glass 220 And the pitcher AR glasses 220 may be configured to start shooting video and transmit to the baseball referee AR glasses 230 in real time.
  • the touch pad 232 may be configured to receive a touch command of the referee.
  • the touch pad 232 may be provided at the te part of the baseball referee AR glass 230, and may be configured to perform a predetermined command when the referee touches the hand once. Of course, various commands may be programmed to be performed according to the number of touches.
  • a voice command of "shooting” is executed, and if the touch pad 232 is touched twice, a voice command of "replaying” may be executed.
  • a voice command “slow” may be input and executed.
  • the short range communication module 233 for AR glasses may be configured to transmit a voice command received through the microphone 231 or a touch command received by the touch pad 232 to the short range communication module 222 for the AR glasses.
  • the AR glass short-range communication module 222 may be configured to receive a video in real time from the AR glass short-range communication module 222 of the pitcher AR glass 220.
  • the projector 234 may be configured to project a video received in real time from the short range communication module 233 for AR glasses to the eyes of the referee through a prism.
  • FIG. 3 is a flowchart of a sport competition determination method using AR glasses according to an embodiment of the present invention.
  • a plurality of video cameras 110 installed in a stadium for shooting a game captures a video at each shooting angle and transmits the video to the video server 120 (S101).
  • the video server 120 receives a video captured by the video camera 110 and stores the received video for each video camera 110 (S102).
  • the augmented-reality glass 130 for the referee receives a voice command from the referee through the microphone 131 or the touch command of the referee through the touch pad 132. (S103).
  • the AR glass 130 for judgment transmits the voice command or touch command previously received to the judgment smartphone 140 by short-range communication (S104).
  • the judgment smartphone 140 receives the voice command or the touch command and transmits the received voice command or the touch command to the video server 120 by 3G / 4G mobile communication (S105).
  • the video server 120 extracts a clip video corresponding to a voice command or a touch command from the previously stored video and transmits the clip video to the judgment smartphone 140 by 3G / 4G mobile communication (S106).
  • the video server 120 may be configured to extract and transmit a predetermined back number, a predetermined camera number, and a clip video before a predetermined second according to a voice command.

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Human Resources & Organizations (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • Multimedia (AREA)
  • Entrepreneurship & Innovation (AREA)
  • General Health & Medical Sciences (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Economics (AREA)
  • Human Computer Interaction (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Data Mining & Analysis (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • User Interface Of Digital Computer (AREA)
  • General Engineering & Computer Science (AREA)
  • Primary Health Care (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Computational Linguistics (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)

Abstract

경기장 내에 설치되어 복수의 촬영 각도에서 동영상을 촬영하는 복수의 동영상 카메라; 동영상 카메라에서 촬영된 동영상을 동영상 카메라 별로 저장하고 심판의 음성 명령 또는 터치 명령에 대응되는 클립 동영상을 송신하는 동영상 서버; 음성 명령을 입력받는 마이크로폰과, 터치 명령을 입력받는 터치패드와, 음성 명령 또는 터치 명령을 송신하고 음성 명령 또는 터치 명령에 대응되는 클립 동영상을 수신하는 AR 글래스용 근거리 통신 모듈과, AR글래스용 근거리 통신 모듈에 의해 수신된 클립 동영상을 프리즘을 통해 심판의 눈에 영사하는 프로젝터를 포함하는 심판용 AR 글래스; AR 글래스용 근거리 통신 모듈로부터 음성 명령 또는 터치 명령을 수신하는 스마트폰용 근거리 통신 모듈과, AR 글래스용 근거리 통신 모듈로부터 수신된 음성 명령 또는 터치 명령을 동영상 서버로 송신하고 동영상 서버로부터 음성 명령 또는 터치 명령에 대응되는 클립 동영상을 수신하는 이동통신 모듈을 포함하고, 스마트폰용 근거리 통신 모듈에 의해 이동통신 모듈에서 수신된 클립 동영상을 AR 글래스용 근거리 통신 모듈로 송신하는 심판용 스마트 폰; 동작 시간이 동영상 서버에 저장된 동영상의 촬영 시간과 동기화되는 심판용 타이머를 구성한다.

Description

AR 글래스를 이용한 스포츠 경기 판정 시스템 및 방법
본 발명은 스포츠 경기 판정 시스템 및 방법에 관한 것으로서, 좀 더 구체적으로는 AR 글래스를 이용한 스포츠 경기 판정 시스템 및 방법에 관한 것이다.
종래 야구, 럭비, 씨름 등의 다양한 스포츠 경기에서는 심판의 오심 판정으로 인한 판정 시비가 자주 발생하게 된다. 몇몇 종목에서는 그 보완책으로서 비디오 판독이 도입되어 시도되고 있다. 비디오 판독의 분석 결과에 따라 판정이 번복되기도 한다.
기존의 비디오 판독 방식에 의하면, 심판의 판단이 애매한 상황에서 여러 각도에서 촬영된 비디오 영상을 비디오 분석실에서 재생하여 판독을 한 후, 그 결과가 주심에게 전달되어 판정까지 이어진다. 이러한 방식은 경기가 한참동안 중단될 수밖에 없고, 주심이 아닌 비디오 영상을 분석하는 사람의 의견이 반영된다는 문제점이 발생한다.
최근에는 축국의 경우 필드에서 뛰는 선수들 각각마다 카메라가 한대씩 할당되어 경기 내내 해당 선수를 트랙킹(tracking)하는 시스템도 운영되고 있다.
이러한 카메라는 컴퓨터 비젼 프로그래밍과 서보 모터 자동 제어 프로그램을 통하여 사람의 조작 없이 자동으로 트랙킹할 수 있도록 프로그래밍되어 담당 카메라멘의 수동 제어없이도 자동 촬영이 가능하다.
하지만, 이러한 종래 비디오 판독 방식은 판정을 정확하게 할 수 있는 장점이 있으나, 비디오 판독으로 인해 경기가 지연되고 경기의 흐름이 끊긴다는 문제점이 있다. 선수들에게는 경기 리듬이 깨지며 관람객들도 그 재미가 반감될 수밖에 없다.
본 발명의 목적은 AR 글래스를 이용한 스포츠 경기 판정 시스템을 제공하는 데 있다.
본 발명의 다른 목적은 AR 글래스를 이용한 스포츠 경기 판정 방법을 제공하는 데 있다.
상술한 본 발명의 목적에 따른 AR 글래스를 이용한 스포츠 경기 판정 시스템은, 경기를 촬영하기 위해 경기장 내에 설치되어 복수의 촬영 각도에서 동영상을 촬영하는 복수의 동영상 카메라; 상기 동영상 카메라에서 촬영된 동영상을 상기 동영상 카메라 별로 저장하고 심판의 음성 명령 또는 터치 명령에 대응되는 클립(clip) 동영상을 송신하는 동영상 서버; 상기 심판의 음성 명령을 입력받는 마이크로폰(microphone)과, 상기 심판의 터치 명령을 입력받는 터치패드(touch pad)와, 상기 마이크로폰을 통해 입력받은 음성 명령 또는 상기 터치패드에 의해 입력받은 터치 명령을 송신하고 상기 음성 명령 또는 터치 명령에 대응되는 클립 동영상을 수신하는 AR 글래스용 근거리 통신 모듈과, 상기 AR글래스용 근거리 통신 모듈에 의해 수신된 클립 동영상을 프리즘(prism)을 통해 상기 심판의 눈에 영사하는 프로젝터(projector)를 포함하는 심판용 AR 글래스(augmented-reality glass); 상기 AR 글래스용 근거리 통신 모듈로부터 음성 명령 또는 터치 명령을 수신하는 스마트폰용 근거리 통신 모듈과, 상기 AR 글래스용 근거리 통신 모듈로부터 수신된 음성 명령 또는 터치 명령을 상기 동영상 서버로 송신하고 상기 동영상 서버로부터 상기 음성 명령 또는 터치 명령에 대응되는 클립 동영상을 수신하는 이동통신 모듈을 포함하고, 상기 스마트폰용 근거리 통신 모듈은 상기 이동통신 모듈에서 수신된 클립 동영상을 상기 AR 글래스용 근거리 통신 모듈로 송신하는 심판용 스마트 폰; 동작 시간이 상기 스마트폰용 근거리 통신 모듈 및 이동통신 모듈을 통해 상기 동영상 서버에 저장된 동영상의 촬영 시간과 동기화되는 심판용 타이머(timer)를 포함하도록 구성될 수 있다.
이때, 상기 동영상 서버는, 상기 음성 명령에 따라 소정 등번호(back number), 소정 카메라 번호, 소정 초(second) 이전의 클립 동영상을 추출하여 송신하거나, 상기 터치 명령에 따라 미리 지정된 소정 초(second) 이전의 클립 동영상을 추출하여 송신하도록 구성될 수 있다.
그리고 상기 심판용 AR 글래스는, 상기 AR글래스용 근거리 통신 모듈에 의해 수신된 클립 동영상을 상기 심판의 소정 음성 명령에 따라 소정 재생 속도를 갖는 슬로우 모션으로 재생하도록 구성될 수 있다.
상술한 본 발명의 다른 목적에 따른 AR 글래스를 이용한 스포츠 경기 판정 방법은, 경기 촬영을 위해 경기장 내에 설치된 복수의 동영상 카메라가 각각의 촬영 각도에서 동영상을 촬영하여 송신하는 단계; 동영상 서버가 상기 촬영된 동영상을 수신하고 수신된 동영상을 상기 동영상 카메라 별로 저장하는 단계; 심판용 AR 글래스(augmented-reality glass)가 마이크로폰(microphone)을 통해 심판으로부터 음성 명령을 입력받거나 터치패드(touch pad)를 통해 상기 심판의 터치 명령을 입력받는 단계; 상기 심판용 AR 글래스가 상기 입력받은 음성 명령 또는 터치 명령을 근거리 통신에 의해 심판용 스마트 폰으로 송신하는 단계; 상기 심판용 스마트폰이 상기 음성 명령 또는 터치 명령을 수신하고, 수신된 음성 명령 또는 터치 명령을 3G/4G 이동통신에 의해 상기 동영상 서버로 송신하는 단계; 상기 동영상 서버가 상기 저장된 동영상 중 상기 수신된 음성 명령 또는 터치 명령에 대응되는 클립 동영상을 추출하여 3G/4G 이동통신에 의해 상기 심판용 스마트 폰으로 송신하는 단계; 상기 심판용 스마트 폰이 상기 클립 동영상을 수신하여 근거리 통신에 의해 상기 심판용 AR 글래스로 송신하는 단계; 상기 심판용 AR 글래스가 상기 클립 동영상을 수신하여 프로젝터(projector)를 이용하여 상기 심판의 눈에 영사하는 단계를 포함하도록 구성될 수 있다.
여기에서, 상기 동영상 서버가 상기 저장된 동영상 중 상기 수신된 음성 명령 또는 터치 명령에 대응되는 클립 동영상을 추출하여 3G/4G 이동통신에 의해 상기 심판용 스마트 폰으로 송신하는 단계는, 상기 음성 명령에 따라 소정 등번호(back number), 소정 카메라 번호, 소정 초(second) 이전의 클립 동영상을 추출하여 송신하거나, 상기 터치 명령에 따라 미리 지정된 소정 초(second) 이전의 클립 동영상을 추출하여 송신하도록 구성될 수 있다.
그리고 상기 동영상 서버에 저장된 동영상의 촬영 시간은 상기 심판용 스마트폰을 통해 심판용 타이머(timer)의 동작 시간과 동기화되도록 구성될 수 있다.
한편, 상기 심판용 AR 글래스가 상기 클립 동영상을 수신하여 프로젝터(projector)를 이용하여 상기 심판의 눈에 영사하는 단계는, 상기 심판용 AR 글래스가 상기 수신된 클립 동영상을 상기 심판의 소정 음성 명령에 따라 소정 재생 속도를 갖는 슬로우 모션으로 재생하여 영사하도록 구성될 수 있다.
상기와 같은 AR 글래스를 이용한 스포츠 경기 판정 시스템 및 방법에 의하면, 심판용 AR 글래스를 통해 판정이 애매한 상황에서 촬영된 다양한 각도의 클립 동영상을 영사함으로써, 심판이 실시간으로 비디오 판독을 하여 정확한 판정을 내리도록 하는 효과가 있다.
이로 인해 경기의 지연이나 경기 흐름이 끊기지 않고 신속하고 정확한 경기의 진행이 가능해지는 효과가 있다.
또한, 기존과 달리 비디오 분석가와 같은 심판 이외의 다른 사람이 심판 판정에 직간접적으로 관여하는 것을 배제할 수 있는 효과가 있다.
그리고 심판이 재생하는 클립 동영상을 경기장의 전광판을 통해 동시에 재생함으로써, 선수와 관람객들도 동시에 판정 과정을 지켜볼 수 있는 효과가 있다. 선수나 관람객들이 동시에 실시간 비디오 시청을 함으로써, 심판 판정에 대한 논란의 여지를 줄이고 공정하고 신속하게 경기를 진행할 수 있는 효과가 있다.
도 1은 본 발명의 일 실시예에 따른 AR 글래스를 이용한 스포츠 경기 판정 시스템의 블록 구성도이다.
도 2는 본 발명의 일 실시예에 따른 AR 글래스를 이용한 스트라이크존 판정 시스템의 블록 구성도이다.
도 3은 본 발명의 일 실시예에 따른 AR 글래스를 이용한 스포츠 경기 판정 방법의 흐름도이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시 예들을 도면에 예시하고 발명을 실시하기 위한 구체적인 내용에 상세하게 설명하고자 한다.
그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.
제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다.
반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다.
일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
도 1은 본 발명의 일 실시예에 따른 AR 글래스를 이용한 스포츠 경기 판정 시스템의 블록 구성도이다.
도 1을 참조하면, 본 발명의 일 실시예에 따른 AR 글래스를 이용한 스포츠 경기 판정 시스템(100)(이하, '스포츠 경기 판정 시스템'이라 함)은 복수의 동영상 카메라(110), 동영상 서버(120), 심판용 AR 글래스(130), 심판용 스마트 폰(140), 심판용 타이머(150) 및 전광판(160)을 포함하도록 구성될 수 있다.
스포츠 경기 판정 시스템(100)은 심판이 경기 중에 심판용 AR 글래스(130)를 통해 판정이 애매한 상황의 동영상을 실시간 비디오 판독할 수 있도록 구성됨으로써, 판정 오류를 줄일 수 있다. 또한, 기존의 비디오 판독 방식에 따른 경기 지연이나 흐름 방해와 같은 부작용을 줄일 수 있는 장점이 있다.
또한, 심판 이외의 타인의 판정 관여를 배제할 수 있으며, 전광판(160)을 통해 심판의 비디오 판독 과정을 선수와 관람객도 지켜볼 수 있도록 구성됨으로써, 판정의 공정성을 기하고 판정의 논란을 줄일 수 있는 장점이 있다.
이하, 세부적인 구성에 대하여 설명한다.
동영상 카메라(110)는 경기를 촬영하기 위해 경기장 내에 설치되는 것으로서, 다양한 각도에서 촬영할 수 있도록 배치될 수 있다. 동영상 카메라(110)는 복수 개로 구비될 수 있으며, 구기 종목의 경우 각 선수들마다 한 대 또는 한 대 이상의 전용 카메라를 할당하여 각 선수들의 움직임을 트랙킹(tracking)하도록 구성될 수 있다.
이때, 각 선수들마다 할당된 동영상 카메라(110)는 전용 서보 제어 프로그램에 의해 해당 선수를 자동으로 트랙킹하여 촬영하도록 구성되는 것이 바람직하다.
여기에서, 경기는 축구, 농구, 럭비, 씨름, 태권도 등등 그 종류에 제한이 없다.
동영상 서버(120)는 동영상 카메라(110)에서 촬영된 동영상을 동영상 카메라(110) 별로 저장하도록 구성될 수 있다. 동영상 서버(120)는 경기장 내에 구비되는 것이 바람직하다.
동영상 서버(120)는 심판의 음성 명령 또는 터치 명령에 대응되는 클립(clip) 동영상을 심판용 스마트 폰(140)으로 송신하도록 구성될 수 있다.
즉, 동영상 서버(120)는 심판의 음성 명령이나 터치 명령을 심판용 스마트 폰(140)으로부터 수신하고, 이를 분석하여 해당하는 클립 동영상을 추출하여 다시 심판용 스마트 폰(140)으로 제공하도록 구성될 수 있다.
심판용 AR 글래스(augmented-reality glass)(130)는 마이크로폰(microphone)(131), 터치패드(touch pad)(132), AR 글래스용 근거리 통신 모듈(133) 및 프로젝터(projector)(134)를 포함하도록 구성될 수 있다.
여기에서, 심판용 AR 글래스(130)는 심판이 착용하기 위한 일종의 안경으로서, 실제 전방 주시와 동시에 영상의 시청이 가능하도록 구성된다.
예를 들면, 구글사(google)사에서 출시된 구글 글래스(google glass)가 그 예가 될 수 있다.
마이크로폰(131)은 심판의 음성 명령을 입력받도록 구성될 수 있다.
여기에서, 음성 명령은 심판이 비디오 판독을 하고자 하는 동영상을 동영상 서버(120)로 요청하기 위한 명령이다.
예를 들어, 선수의 소정 등번호(back number), 소정의 카메라 번호, 현재로부터 몇초 이전의 영상을 볼 것인가를 나타내느 소정 초(second) 이전의 시각이 음성 명령이 포함될 수 있다. 음성 명령에 포함된 내용에 따라 소정 등번호의 선수를 촬영한 동영상 카메라(110) 그 중에서 특정 각도에서 찍은 동영상 카메라(110)를 특정하여 해당 상황을 재생할 수 있게 된다.
음성 명령의 예를 들자면, 심판이 "10번, 3번 카메라, 10초전"이라는 음성 명령을 내릴 수 있을 것이다. 또는 등번호 대신 선수의 이름으로 음성 명령을 내릴 수 있도록 구성될 수도 있다. 즉 "리오넬 메시, 3번 카메라, 10초전"이라는 음성 명령이 내려질 수 있다.
터치패드(132)는 심판의 터치 명령을 입력받도록 구성될 수 있다. 터치패드(132)는 심판용 AR 글래스(130)의 테 부분에 구비될 수 있으며, 심판이 손으로 한번 터치하면 미리 정해진 명령이 수행되도록 구성될 수 있다. 터치의 횟수에 따라서도 다양한 명령이 수행되도록 프로그래밍될 수 있음은 물론이다.
심판의 터치가 있는 경우 그 터치 명령은 현재로부터 정해진 시간 전의 동영상을 자동으로 재생하도록 지시하는 것으로 구성될 수 있다. 즉, 한번 터치하면 자동으로 10초 전부터 현재까지의 영상을 재생하는 명령이 지정될 수 있다.
이러한 경우, 동영상 서버(120)는 음성 명령에 따라 소정 등번호(back number), 소정 카메라 번호, 소정 초(second) 이전의 클립 동영상을 추출하여 송신하거나, 터치 명령에 따라 미리 지정된 소정 초(second) 이전의 클립 동영상을 추출하여 송신하도록 구성될 수 있다.
AR 글래스용 근거리 통신 모듈(133)은 마이크로폰(131)을 통해 입력받은 음성 명령 또는 터치패드(132)에 의해 입력받은 터치 명령을 스마트폰용 근거리 통신 모듈(141)로 송신하도록 구성될 수 있다.
여기에서, 근거리 통신 방식은 와이파이, 와이파이 다이렉트, 블루투스, 지그비 등의 방식을 모두 포함할 수 있다.
한편, AR 글래스용 근거리 통신 모듈(133)은 스마트폰용 근거리 통신 모듈(141)로부터 음성 명령이나 터치 명령에 대응되는 클립 동영상을 수신하도록 구성될 수 있다.
그런데, AR 글래스용 근거리 통신 모듈(133)과 동영상 서버(120) 간에 근거리 통신이 가능하다면 심판용 스마트 폰(140)을 경유하지 않고 직접 심판용 AR 글래스(130)와 동영상 서버(120) 간의 통신이 수행되는 것이 바람직하다.
프로젝터(134)는 AR 글래스용 근거리 통신 모듈(133)에서 수신된 클립 동영상을 프리즘(prism)을 통해 심판의 눈에 영사하도록 구성될 수 있다. 현재 출시된 구글 글래스의 디스플레이 방식과 동일하다.
구글 글래스에서는 테에 장착된 초소형 프로젝터에서 광학 프리즘을 통하여 내부 전반사가 이루어지는 각도로 이미지가 영사되도록 하여 사용자의 눈에 상이 맺히도록 구성된다. 프리즘을 통한 영상을 사용자가 선택적으로 볼 수 있기에 AR(augmented-reality) 방식이라고 하는데, 현재는 약 2.5m 거리에서 25인치 스크린의 HD 영상 화질이 구현된다.
한편, 심판용 AR 글래스(130)는 AR글래스용 근거리 통신 모듈(131)에 의해 수신된 클립 동영상을 심판의 소정 음성 명령에 따라 소정 재생 속도를 갖는 슬로우 모션으로 재생하도록 구성될 수 있다. 즉, 느리게 재생하여 판정의 정확성을 기할 수 있다. 예를 들어, 심판이 "느리게"라고 얘기하면 재생 도중에 느리게 재생이 되도록 구성될 수 있다. 또는 터치패드(132)에 터치를 두번 연이어 하면 재생이 느려지도록 구성될 수도 있다.
심판용 스마트 폰(140)은 스마트폰용 근거리 통신 모듈(141) 및 이동통신 모듈(142)을 포함하도록 구성될 수 있다.
심판용 스마트 폰(140)은 심판이 경기 중에 소지하는 구성으로서, 심판용 AR 글래스(130)와 동영상 서버(120) 간의 중계 기능을 담당한다. 그러나, 심판용 AR 글래스(130)와 동영상 서버(120) 간에 근거리 통신이 가능하다면, 심판용 스마트 폰(140)의 구성이 생략될 수도 있다.
스마트폰용 근거리 통신 모듈(141)은 AR 글래스용 근거리 통신 모듈(133)로부터 음성 명령 또는 터치 명령을 수신하도록 구성될 수 있다.
그리고 스마트폰용 근거리 통신 모듈(141)은 이동통신 모듈(142)에서 동영상 서버(120)로부터 수신한 클립 동영상을 AR 글래스용 근거리 통신 모듈(133)로 송신하도록 구성될 수 있다.
이동통신 모듈(142)은 스마트폰용 근거리 통신 모듈(141)에서 수신한 음성 명령 또는 터치 명령을 동영상 서버(120)로 송신하도록 구성될 수 있다.
그리고 이동통신 모듈(142)은 동영상 서버(120)로부터 음성 명령 또는 터치 명령에 대응되는 클립 동영상을 수신하도록 구성될 수 있다.
심판용 타이머(150)는 심판이 경기 중 경기 시간을 재기 위한 구비하는 타이머로서, 타이머용 근거리 통신 모듈(151)을 포함하도록 구성될 수 있다.
심판용 타이머(150)의 동작 시간은 스마트폰용 근거리 통신 모듈(141) 및 이동통신 모듈(142)을 통해 동영상 서버(120)에 저장된 동영상의 촬영 시간과 동기화되도록 구성될 수 있다.
이는 심판이 요청하는 시간의 클립 동영상을 동영상 서버(120)에서 정확하게 추출하기 위해서 동영상 서버(120)와 심판용 타이머(150)의 시간이 서로 동기화되어야 하기 때문이다.
심판용 타이머(150) 대신 심판용 스마트 폰(140)에 내장된 타이머 기능을 이용할 수 도 있다. 이때에는, 심판용 스마트 폰(140)의 동작 시간이 동영상 서버(120)의 시간과 동기화되도록 구성될 수 있다.
전광판(160)은 경기장 내에 구비된 것으로서, 선수와 코칭 스태프는 물론 관람객들도 모두 심판의 클립 동영상을 동시에 실시간 시청 가능하도록 디스플레이하는 것으로 구성될 수 있다.
전광판(160)은 동영상 서버(120)와 연결되어 구성될 수 있으며, 심판이 내린 음성 명령 또는 터치 명령에 따라 생성된 클립 동영상을 전광판(160)에서도 실시간으로 수신하여 디스플레이하도록 구성될 수 있다.
전광판(160)의 디스플레이에 따라 심판의 판독 과정을 TV 시청하듯이 지켜볼 수 있으며, 이는 양 진영의 감독, 선수나 관람객들에게 쉽고 빠르게 동의를 이끌어내고 신속하고 공정한 경기 진행을 돕는데 매우 유용하다.
전광판(160)의 디스플레이는 경기 진행 룰에 따라 또는 심판의 재량에 따라 선택적으로 이루어질 수 있도록 구성되는 것이 바람직하다.
도 2는 본 발명의 일 실시예에 따른 AR 글래스를 이용한 스트라이크존 판정 시스템의 블록 구성도이다.
도 2를 참조하면, 본 발명의 일 실시예에 따른 AR 글래스를 이용한 스트라이크존 판정 시스템(200)(이하, '스트라이크존 판정 시스템'이라 함)은 동영상 카메라(210), 투수용 AR 글래스(220), 야구 주심용 AR 글래스(230)를 포함하도록 구성될 수 있다.
도 2의 스트라이크존 판정 시스템(200)은 도 1의 실시예와 달리 투수의 피칭볼(pitching ball)이 스트라이크존(strike zone)에 들어왔는지 정확하게 판정하도록 특화된 시스템이다. 피칭볼의 판정 이외의 일반적인 야구 경기의 판정은 도 1의 실시예가 그대로 이용될 수 있음은 물론이다.
야구 주심은 포수의 뒷편에 서 있기 때문에 포수의 몸에 가려 피칭 볼의 정확한 위치를 파악하기 힘든 상황이 자주 발생한다. 특히, 변화구의 경우나 포수가 피칭 볼을 잡자마자 포수 미트(meat)를 살짝 움직여 주심의 판정에 혼란을 야기하는 경우도 많다. 이에, 스트라이크존 판정 시스템(200)은 주심의 스트라이크 판정에 대한 오심을 줄일 수 있도록 구성된다. 이하, 세부적인 구성에 대하여 설명한다.
동영상 카메라(210)는 투수의 뒷편에서 포수를 줌인(zoom in)하여 동영상 촬영할 수 있도록 배치된다. 야구장의 외야 관람석 쪽에 배치되는 것이 바람직하다.
동영상 카메라(210)에서 촬영된 줌인 동영상은 동영상 카메라에 구비되는 근거리 통신 모듈(미도시)에 의해 야구 주심용 AR 글래스(230)로 실시간 송신되도록 구성될 수 있다. 여기에서, 근거리 통신 모듈은 야구장의 거리 등을 감안할 때 와이파이 모듈인 것이 바람직하다.
투수용 AR 글래스(220)는 AR 글래스용 동영상 카메라(221) 및 AR 글래스용 근거리 통신 모듈(222)을 포함하도록 구성될 수 있다.
투수용 AR 글래스(220)는 투수가 착용하기 위한 글래스인데, 투수가 피칭 후 포수가 공을 잡을 때까지 응시하는 경우가 많으므로, 정면에서 공이 정확하게 스트라이크존에 들어가는지 확인하기에 매우 적합하다.
투수용 AR 글래스(220)에 장착된 AR 글래스용 동영상 카메라(221)는 피칭 후 포수의 정면을 촬영하도록 구성될 수 있다.
AR 글래스용 근거리 통신 모듈(222)은 AR 글래스용 동영상 카메라(221)에서 촬영된 동영상을 실시간으로 야구 주심용 AR 글래스(230)로 송신하도록 구성될 수 있다.
여기에서, 동영상 카메라(210)와 투수용 AR 글래스(220) 중 어느 하나가 이용되거나 둘 다 이용될 수도 있다.
야구 주심용 AR 글래스(230)는 마이크로폰(231), 터치패드(232), AR 글래스용 근거리 통신 모듈(233) 및 프로젝터(234)를 포함하도록 구성될 수 있다.
마이크로폰(231)은 주심의 음성 명령을 입력받도록 구성될 수 있다.
음성 명령의 예를 들면, "리플레이(replay)"라고 말하면 투수용 AR 글래스(220)에서 촬영된 동영상이 소정 초 이전부터 다시 리플레이하는 명령이 될 수 있다. 또는 "느리게"라고 말하면 동영상이 느리게 다시 리플레이되는 명령이 될 수 있다.
또한, 투수용 AR 글래스(220)에서 동영상을 상시 촬영할 수는 없으므로, 투수가 피칭 준비를 하는 상황이 되면, 주심이 "촬영"이라는 음성 명령을 입력하고 이 음성 명령을 투수용 AR 글래스(220)로 송신하여 투수용 AR 글래스(220)가 동영상 촬영을 시작하고 실시간으로 야구 주심용 AR 글래스(230)로 송신하도록 구성될 수 있다.
터치패드(232)는 심판의 터치 명령을 입력받도록 구성될 수 있다.
터치패드(232)는 야구 주심용 AR 글래스(230)의 테 부분에 구비될 수 있으며, 심판이 손으로 한번 터치하면 미리 정해진 명령이 수행되도록 구성될 수 있다. 터치의 횟수에 따라서도 다양한 명령이 수행되도록 프로그래밍될 수 있음은 물론이다.
예를 들어, 터치패드(232)가 한번 터치되면 "촬영"이라는 음성 명령이 실행되고, 터치패드(232)가 두번 터치되면 "리플레이"라는 음성 명령이 실행될 수 있다. 터치패드(232)가 세번 터치되면 "느리게"라는 음성 명령이 입력되어 실행될 수 있다.
AR 글래스용 근거리 통신 모듈(233)은 마이크로폰(231)을 통해 입력받은 음성 명령 또는 터치패드(232)에 의해 입력받은 터치 명령을 AR 글래스용 근거리 통신 모듈(222)로 송신하도록 구성될 수 있다.
한편, AR 글래스용 근거리 통신 모듈(222)은 투수용 AR 글래스(220)의 AR 글래스용 근거리 통신 모듈(222)로부터 동영상을 실시간 수신하도록 구성될 수 있다.
프로젝터(234)는 AR 글래스용 근거리 통신 모듈(233)에서 실시간 수신되는 동영상을 프리즘(prism)을 통해 심판의 눈에 영사하도록 구성될 수 있다.
도 3은 본 발명의 일 실시예에 따른 AR 글래스를 이용한 스포츠 경기 판정 방법의 흐름도이다.
도 3을 참조하면, 먼저 경기 촬영을 위해 경기장 내에 설치된 복수의 동영상 카메라(110)가 각각의 촬영 각도에서 동영상을 촬영하여 동영상 서버(120)로 송신한다(S101).
다음으로, 동영상 서버(120)가 동영상 카메라(110)에서 촬영된 동영상을 수신하고 수신된 동영상을 동영상 카메라(110) 별로 저장한다(S102).
다음으로, 심판용 AR 글래스(augmented-reality glass)(130)가 마이크로폰(microphone)(131)을 통해 심판으로부터 음성 명령을 입력받거나 터치패드(touch pad)(132)를 통해 심판의 터치 명령을 입력받는다(S103).
다음으로, 심판용 AR 글래스(130)가 앞서 입력받은 음성 명령 또는 터치 명령을 근거리 통신에 의해 심판용 스마트 폰(140)으로 송신한다(S104).
다음으로, 심판용 스마트 폰(140)이 음성 명령 또는 터치 명령을 수신하고, 수신된 음성 명령 또는 터치 명령을 3G/4G 이동통신에 의해 동영상 서버(120)로 송신한다(S105).
다음으로, 동영상 서버(120)가 앞서 저장된 동영상 중 음성 명령 또는 터치 명령에 대응되는 클립 동영상을 추출하여 3G/4G 이동통신에 의해 심판용 스마트 폰(140)으로 송신한다(S106).
이때, 동영상 서버(120)는 음성 명령에 따라 소정 등번호(back number), 소정 카메라 번호, 소정 초(second) 이전의 클립 동영상을 추출하여 송신하도록 구성될 수 있다.
또한, 동영상 서버(120)는 터치 명령에 따라 미리 지정된 소정 초(second) 이전의 클립 동영상을 자동으로 추출하여 송신하도록 구성될 수 있다.
이때, 동영상 서버(120)에 저장된 동영상의 촬영 시간은 심판용 스마트 폰(140)을 통해 심판용 타이머(timer)의 동작 시간과 동기화되도록 구성될 수 있다.
다음으로, 심판용 스마트 폰(140)이 클립 동영상을 수신하여 근거리 통신에 의해 심판용 AR 글래스(130)로 송신한다(S107).
다음으로, 심판용 AR 글래스(130)가 클립 동영상을 수신하여 프로젝터(projector)(134)를 이용하여 심판의 눈에 영사한다(S108).
이때, 심판용 AR 글래스(130)는 앞서 수신된 클립 동영상을 심판의 소정 음성 명령에 따라 소정 재생 속도를 갖는 슬로우 모션으로 재생하여 영사하도록 구성될 수 있다.
이상 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허청구범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.

Claims (4)

  1. 경기를 촬영하기 위해 경기장 내에 설치되어 복수의 촬영 각도에서 동영상을 촬영하는 복수의 동영상 카메라;
    상기 동영상 카메라에서 촬영된 동영상을 상기 동영상 카메라 별로 저장하고 심판의 음성 명령 또는 터치 명령에 대응되는 클립(clip) 동영상을 송신하는 동영상 서버;
    상기 심판의 음성 명령을 입력받는 마이크로폰(microphone)과, 상기 심판의 터치 명령을 입력받는 터치패드(touch pad)와, 상기 마이크로폰을 통해 입력받은 음성 명령 또는 상기 터치패드에 의해 입력받은 터치 명령을 송신하고 상기 음성 명령 또는 터치 명령에 대응되는 클립 동영상을 수신하는 AR 글래스용 근거리 통신 모듈과, 상기 AR글래스용 근거리 통신 모듈에 의해 수신된 클립 동영상을 프리즘(prism)을 통해 상기 심판의 눈에 영사하는 프로젝터(projector)를 포함하는 심판용 AR 글래스(augmented-reality glass);
    상기 AR 글래스용 근거리 통신 모듈로부터 음성 명령 또는 터치 명령을 수신하는 스마트폰용 근거리 통신 모듈과, 상기 AR 글래스용 근거리 통신 모듈로부터 수신된 음성 명령 또는 터치 명령을 상기 동영상 서버로 송신하고 상기 동영상 서버로부터 상기 음성 명령 또는 터치 명령에 대응되는 클립 동영상을 수신하는 이동통신 모듈을 포함하고, 상기 스마트폰용 근거리 통신 모듈은 상기 이동통신 모듈에서 수신된 클립 동영상을 상기 AR 글래스용 근거리 통신 모듈로 송신하는 심판용 스마트 폰;
    동작 시간이 상기 스마트폰용 근거리 통신 모듈 및 이동통신 모듈을 통해 상기 동영상 서버에 저장된 동영상의 촬영 시간과 동기화되는 심판용 타이머(timer)를 포함하고,
    상기 동영상 서버는,
    상기 음성 명령에 따라 소정 등번호(back number), 소정 카메라 번호, 소정 초(second) 이전의 클립 동영상을 추출하여 송신하거나, 상기 터치 명령에 따라 미리 지정된 소정 초(second) 이전의 클립 동영상을 추출하여 송신하도록 구성되는 것을 특징으로 하는 AR 글래스를 이용한 스포츠 경기 판정 시스템.
  2. 제1항에 있어서, 상기 심판용 AR 글래스는,
    상기 AR글래스용 근거리 통신 모듈에 의해 수신된 클립 동영상을 상기 심판의 소정 음성 명령에 따라 소정 재생 속도를 갖는 슬로우 모션으로 재생하는 것을 특징으로 하는 AR 글래스를 이용한 스포츠 경기 판정 시스템.]
  3. 경기 촬영을 위해 경기장 내에 설치된 복수의 동영상 카메라가 각각의 촬영 각도에서 동영상을 촬영하여 송신하는 단계;
    동영상 서버가 상기 촬영된 동영상을 수신하고 수신된 동영상을 상기 동영상 카메라 별로 저장하는 단계;
    심판용 AR 글래스(augmented-reality glass)가 마이크로폰(microphone)을 통해 심판으로부터 음성 명령을 입력받거나 터치패드(touch pad)를 통해 상기 심판의 터치 명령을 입력받는 단계;
    상기 심판용 AR 글래스가 상기 입력받은 음성 명령 또는 터치 명령을 근거리 통신에 의해 심판용 스마트 폰으로 송신하는 단계;
    상기 심판용 스마트 폰이 상기 음성 명령 또는 터치 명령을 수신하고, 수신된 음성 명령 또는 터치 명령을 3G/4G 이동통신에 의해 상기 동영상 서버로 송신하는 단계;
    상기 동영상 서버가 상기 저장된 동영상 중 상기 수신된 음성 명령 또는 터치 명령에 대응되는 클립 동영상을 추출하여 3G/4G 이동통신에 의해 상기 심판용 스마트 폰으로 송신하는 단계;
    상기 심판용 스마트 폰이 상기 클립 동영상을 수신하여 근거리 통신에 의해 상기 심판용 AR 글래스로 송신하는 단계;
    상기 심판용 AR 글래스가 상기 클립 동영상을 수신하여 프로젝터(projector)를 이용하여 상기 심판의 눈에 영사하는 단계를 포함하고,
    상기 동영상 서버가 상기 저장된 동영상 중 상기 수신된 음성 명령 또는 터치 명령에 대응되는 클립 동영상을 추출하여 3G/4G 이동통신에 의해 상기 심판용 스마트 폰으로 송신하는 단계는,
    상기 음성 명령에 따라 소정 등번호(back number), 소정 카메라 번호, 소정 초(second) 이전의 클립 동영상을 추출하여 송신하거나, 상기 터치 명령에 따라 미리 지정된 소정 초(second) 이전의 클립 동영상을 추출하여 송신하도록 구성되고,
    상기 동영상 서버에 저장된 동영상의 촬영 시간은,
    상기 심판용 스마트 폰을 통해 심판용 타이머(timer)의 동작 시간과 동기화되는 것을 특징으로 하는 AR 글래스를 이용한 스포츠 경기 판정 방법.
  4. 제3항에 있어서, 상기 심판용 AR 글래스가 상기 클립 동영상을 수신하여 프로젝터(projector)를 이용하여 상기 심판의 눈에 영사하는 단계는,
    상기 심판용 AR 글래스가 상기 수신된 클립 동영상을 상기 심판의 소정 음성 명령에 따라 소정 재생 속도를 갖는 슬로우 모션으로 재생하여 영사하는 것을 특징으로 하는 AR 글래스를 이용한 스포츠 경기 판정 방법.
PCT/KR2014/007345 2013-08-07 2014-08-07 Ar 글래스를 이용한 스포츠 경기 판정 시스템 및 방법 WO2015020466A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020130093651A KR101540771B1 (ko) 2013-08-07 2013-08-07 Ar 글래스를 이용한 스포츠 경기 판정 시스템 및 방법
KR10-2013-0093651 2013-08-07

Publications (1)

Publication Number Publication Date
WO2015020466A1 true WO2015020466A1 (ko) 2015-02-12

Family

ID=52461688

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2014/007345 WO2015020466A1 (ko) 2013-08-07 2014-08-07 Ar 글래스를 이용한 스포츠 경기 판정 시스템 및 방법

Country Status (2)

Country Link
KR (1) KR101540771B1 (ko)
WO (1) WO2015020466A1 (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102668233B1 (ko) 2018-09-04 2024-05-23 삼성전자주식회사 관심 영역을 통해 움직이는 외부 객체에 대해 프레임 레이트를 제어하여 이미지들을 획득하는 전자 장치 및 그의 동작 방법
US11867904B2 (en) 2020-12-18 2024-01-09 Samsung Electronics Co., Ltd. Method and electronic device for providing augmented reality environment
KR20220088043A (ko) * 2020-12-18 2022-06-27 삼성전자주식회사 증강 현실 환경을 제공하기 위한 방법 및 전자 장치
KR102527918B1 (ko) 2021-02-23 2023-04-28 한남대학교 산학협력단 Ar 스마트 글래스 시스템

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120075090A (ko) * 2010-12-28 2012-07-06 엘지전자 주식회사 이동단말기 및 그의 증강현실을 이용한 비밀번호 관리 방법
KR20130017922A (ko) * 2011-08-12 2013-02-20 이형호 휴대용 촬영기능 및 네트워크를 이용한 신변보호 안경
KR20130070035A (ko) * 2011-12-19 2013-06-27 주식회사 엔씨소프트 방송 객체의 3d 모델링 데이터를 이용한 방송 시청 시점 다각화 시스템 및 그 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120075090A (ko) * 2010-12-28 2012-07-06 엘지전자 주식회사 이동단말기 및 그의 증강현실을 이용한 비밀번호 관리 방법
KR20130017922A (ko) * 2011-08-12 2013-02-20 이형호 휴대용 촬영기능 및 네트워크를 이용한 신변보호 안경
KR20130070035A (ko) * 2011-12-19 2013-06-27 주식회사 엔씨소프트 방송 객체의 3d 모델링 데이터를 이용한 방송 시청 시점 다각화 시스템 및 그 방법

Also Published As

Publication number Publication date
KR101540771B1 (ko) 2015-08-06
KR20150017564A (ko) 2015-02-17

Similar Documents

Publication Publication Date Title
US6466275B1 (en) Enhancing a video of an event at a remote location using data acquired at the event
US5797805A (en) Method and system for producing personal golf lesson video
WO2015020466A1 (ko) Ar 글래스를 이용한 스포츠 경기 판정 시스템 및 방법
WO2016000503A1 (zh) 红外投影式台球娱乐系统及其实现方法
US20040162154A1 (en) Kinetic motion analyzer
KR102103757B1 (ko) 볼링 투구 영상 촬영시스템
CN109961039B (zh) 一种个人进球视频捕捉方法及系统
US20170214982A1 (en) Systems and methods for merging multiple angle video feeds
US11538243B2 (en) Video playback method, medium, glasses and program product
US20100195978A1 (en) System to facilitate replay of multiple recordings of a live event
CN107509122A (zh) 视频采集与播放方法、电视及存储介质
CN107635627B (zh) 台球击球辅助方法、台球击球辅助系统及便携式电子设备
WO2023113492A1 (ko) 카메라와 레이더 센서를 이용한 스포츠 트레이닝 영상 제공방법
WO2016027947A1 (ko) 실시간 분석 및 예측에 의한 참여형 스포츠 게임 시스템 및 스포츠 게임 방법
JP5099501B2 (ja) ホールインワン確認システム
US20060146132A1 (en) Video system having multiple video cameras for capturing events
WO2014148927A1 (en) System for video verification of events on the sports field
WO2022086202A1 (ko) 스포츠 중계를 위한 영상을 결정하는 장치, 방법 및 명령을 기록한 기록 매체
JP7154998B2 (ja) 動画タグ付け装置および動画タグ付け方法
KR20090032819A (ko) 다자간 온라인 골프 게임 서비스 제공장치 및 방법
WO2015030534A1 (en) Golf practice system for providing golf lesson information and information processing method for providing golf lesson information using the same
WO2016140444A1 (ko) 경기의 이벤트 관련 가상 동영상을 생성 하는 장치 및 이를 이용한 방법
WO2021167112A1 (ko) 실제 당구대를 대상으로 하는 보조 컨텐츠 디스플레이 시스템
CN112969028A (zh) 智能直播方法及直播物联网系统
CN1488416A (zh) 足球裁判系统及装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14835016

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205A DATED 31.05.2016)

122 Ep: pct application non-entry in european phase

Ref document number: 14835016

Country of ref document: EP

Kind code of ref document: A1