WO2022086202A1 - 스포츠 중계를 위한 영상을 결정하는 장치, 방법 및 명령을 기록한 기록 매체 - Google Patents

스포츠 중계를 위한 영상을 결정하는 장치, 방법 및 명령을 기록한 기록 매체 Download PDF

Info

Publication number
WO2022086202A1
WO2022086202A1 PCT/KR2021/014784 KR2021014784W WO2022086202A1 WO 2022086202 A1 WO2022086202 A1 WO 2022086202A1 KR 2021014784 W KR2021014784 W KR 2021014784W WO 2022086202 A1 WO2022086202 A1 WO 2022086202A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
rally
ball
information
player
Prior art date
Application number
PCT/KR2021/014784
Other languages
English (en)
French (fr)
Inventor
권기환
구경모
여재윤
이상원
Original Assignee
주식회사 픽셀스코프
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 픽셀스코프 filed Critical 주식회사 픽셀스코프
Priority to EP21883270.7A priority Critical patent/EP4235489A4/en
Priority to JP2023549788A priority patent/JP2023549982A/ja
Priority to US18/033,156 priority patent/US20230386051A1/en
Publication of WO2022086202A1 publication Critical patent/WO2022086202A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G06V20/42—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items of sport video content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • G06V20/47—Detecting features for summarising video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/23—Recognition of whole body movements, e.g. for sport training
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23424—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30221—Sports video; Sports image
    • G06T2207/30224—Ball; Puck

Definitions

  • the present disclosure relates to a technique for determining an image for sports broadcasting.
  • a camera group comprising one or more cameras may be used to broadcast sports matches.
  • Each camera in the camera group is arranged in various positions based on the playing space, so that various targets of the match can be photographed from various angles of view.
  • At least one of various images generated by the camera group may be determined as a relay image of the corresponding match and transmitted to viewers.
  • an image suitable for the situation of the corresponding match needs to be determined as the relay image.
  • another image is re-determined so that the relay screen can be switched appropriately.
  • the process of determining an image to be transmitted as a relay image among various images may be performed by a human (eg, a broadcasting station producer, etc.).
  • a human eg, a broadcasting station producer, etc.
  • the method of determining the relay video by humans must depend on the arbitrary judgment of the individual, the quality of the broadcast may be affected by the individual's experience and capabilities, and the fact that important scenes of the match may not be broadcast by mistake, etc. may have a problem with
  • the present disclosure provides a technique for determining an image for sports broadcasting.
  • an apparatus for determining an image for sports broadcasting may be provided.
  • the apparatus may be a device for determining an image to relay the match from among a plurality of images of a sports match captured by a camera group.
  • the apparatus includes: a communication circuit for communicating with the camera group and the video transmission device; one or more processors; and one or more memories storing instructions that, when executed by the one or more processors, cause the one or more processors to perform an operation, wherein the one or more processors are used for the match from the camera group through the communication circuit Acquire ball tracking information for tracking a ball being played, and, based on the ball tracking information, determine the start or end of a rally in the match, and control the communication circuit according to the determination that the rally has started to transmit a first image of the playing space of the match among the plurality of images to the image transmitting device, and according to the determination that the rally is over, control the communication circuit to control the plurality of images.
  • the one or more processors are configured to obtain, through the communication circuit, player movement information for tracking the movement of a player from the camera group, before the start of the rally, and based on the player movement information, It is determined whether the rally is ready to start, and according to the determination that the rally is ready to start, the communication circuit is controlled to display a third image of a player having a serving right in the rally from among the plurality of images. It can be transmitted to the sending device.
  • the one or more processors may determine that the rally has started, based on whether the ball has moved vertically upward by a preset distance or more.
  • the one or more processors may determine that the rally has started, based on whether the ball has touched a match surface in the game space within a preset time interval after the ball has moved vertically upwards more than a preset distance. there is.
  • the one or more processors may determine that the rally has ended, based on the ball tracking information and the game surface information indicating the playing surface in the game space.
  • the one or more processors are configured to: if the ball does not contact another court of the playing surface within a first preset time interval after contacting the one court of the playing surface, or if the speed of the ball is preset When the second time interval or less is maintained for a certain amount or less, it may be determined that the rally has ended.
  • the one or more processors are further configured to: in response to determining that the rally is over, determine whether to score in the rally and a player who scored in the rally based on the match surface information and the ball tracking information, and Based on whether or not a score has been scored and the player who scored the score, the scoring situation information of the match may be updated, and the second image may be determined from among the plurality of images.
  • the one or more processors are configured to: determine a player who has the right to serve in a next rally of the rally based on the information indicating the player who has the right to serve in the rally and the updated scoring situation information, and the second After transmitting the image, the communication circuit may be controlled to transmit a fourth image of a player having a serving right in the next rally among the plurality of images to the image transmitting device.
  • the one or more processors are further configured to: determine, based on the ball tracking information, the number of times the ball has returned between both courts in the rally, and in response to determining that the number of rounds is greater than or equal to a first number of times, After transmitting the second image, the replay image and the fourth image of the rally are sequentially transmitted to the image transmitting device, and according to a determination that the number of round trips is less than or equal to a second number of times smaller than the first number, After transmitting the second image, the high-speed camera image captured by the high-speed camera of the rally and the fourth image may be sequentially transmitted to the image transmitting device.
  • the one or more processors generate the replay image based on at least one image corresponding to a time interval from a time when it is determined that the rally has started among the plurality of images to a time when it is determined that the rally is finished. can do.
  • the one or more processors are configured to determine, based on the ball tracking information, an average value of the horizontal speed of the ball in the rally, and according to determining that the average value is equal to or greater than a preset value, for the rally generating a rally analysis image including analysis information, and before transmitting the fourth image, controlling the communication circuit to transmit the rally analysis image to the image transmission device, the analysis information on the rally, In the rally, it may include information indicating a position in which the ball contacts the game surface in time series.
  • the one or more processors determine that the game including the rally is over, and according to the determination that the game is over, a game including analysis information on the game generating an analysis image, controlling the communication circuit, and transmitting the game analysis image to the image transmitting device It may include at least one piece of information selected from among.
  • a method of determining an image for sports broadcasting may be provided.
  • the method may be a method of determining an image to relay the match from among a plurality of images of a sports match captured by a camera group.
  • the method includes the steps of: obtaining, by one or more processors, through communication circuitry, ball tracking information for tracking a ball used in the match from the camera group; determining a start or end of an in-match rally based on the ball tracking information; controlling the communication circuit to transmit, among the plurality of images, a first image of the match space of the match to a video transmitting device according to a determination that the rally has started; and controlling the communication circuit to transmit a second image of a player who scored in the rally among the plurality of images to the image transmitting device according to a determination that the rally is over.
  • the method includes: obtaining, by the one or more processors, before the start of the rally, through the communication circuit, player movement information for tracking the movement of a player from the camera group; determining whether the rally is ready to start based on the player movement information; and controlling the communication circuit according to the determination that the rally is ready to start, and transmitting a third image of a player having a serving right in the rally among the plurality of images to the image transmitting device.
  • the determining of the start or end of the in-match rally may include whether the ball has moved vertically upwards more than a preset distance and then touched the playing surface in the playing space within a preset time interval based on whether or not , determining that the rally has begun.
  • the determining of the start or end of the in-match rally comprises determining that the rally is over based on the ball tracking information and the match surface information indicating the playing surface in the game space. can do.
  • the transmitting of the second image to the image transmitting device includes determining whether the rally is to be scored, and whether or not to score in the rally, based on the match surface information and the ball tracking information, according to a determination that the rally is over. determining the player to score in; and updating the scoring situation information of the match based on whether the score has been scored and the player who scored the score, and determining the second image among the plurality of images.
  • the step of transmitting the second image to the image transmitting device includes: based on the information indicating the player who has the right to serve in the rally and the updated scoring situation information, the right to serve in the next rally of the rally determining which player has; and after transmitting the second image, controlling the communication circuit to transmit a fourth image of a player having a serving right in the next rally among the plurality of images to the image transmitting device.
  • the step of transmitting the fourth image to the image transmitting device may include: based on the ball tracking information, determining the number of times the ball reciprocates between both courts in the rally; transmitting the replay image of the rally and the fourth image sequentially to the image transmitting device after transmitting the second image according to a determination that the number of round trips is equal to or greater than the first number; and, according to a determination that the number of round trips is less than or equal to a second number of times smaller than the first number, after transmitting the second image, the high-speed camera image and the fourth image taken by the high-speed camera of the rally are sequentially viewed It may include the step of transmitting to the video transmission device.
  • a non-transitory computer-readable recording medium recording a command for determining an image for sports broadcasting.
  • the instructions recorded on the recording medium are instructions to be executed on a computer, and when executed by one or more processors, the one or more processors, through a communication circuit, are used for sports matches from a camera group.
  • a first image of the match space of the match among the plurality of images of the match photographed by the group is transmitted to a video transmission device, and according to the determination that the rally is over, the communication circuit is controlled to control the plurality of images
  • a second image of a player who scored in the rally may be transmitted to the image transmitting device.
  • the technology of the present disclosure it is possible to objectively and accurately determine an image to be transmitted as a relay image. Also, according to the technology of the present disclosure, it is possible to reduce the probability of missing an important scene of a sports match. Accordingly, the broadcast quality of sports matches can be consistently maintained.
  • FIG. 1 is a diagram illustrating an operation process of an apparatus according to an embodiment of the present disclosure.
  • FIG. 2 is a diagram illustrating a block diagram of an apparatus according to an embodiment of the present disclosure.
  • FIG. 3 is a diagram illustrating a process of determining a relay image according to an embodiment of the present disclosure.
  • FIG. 4 is a diagram illustrating a match surface of a sports match according to an embodiment of the present disclosure
  • FIG. 5 is a diagram illustrating continuation and termination of a rally according to an embodiment of the present disclosure.
  • FIG. 6 is a diagram illustrating a process of determining an image to be broadcast when the end of a rally is determined, according to an embodiment of the present disclosure.
  • FIG. 7 is a diagram illustrating a process of generating a replay image according to an embodiment of the present disclosure.
  • FIG. 8 is a diagram illustrating a rally analysis image according to an embodiment of the present disclosure.
  • FIG. 9 is a diagram illustrating a game analysis image according to an embodiment of the present disclosure.
  • VAR video assistant referee
  • FIG. 11 is a diagram illustrating a method of determining a relay image according to an embodiment of the present disclosure.
  • A, B, and C As used herein, “A, B, and C,” “A, B, or C,” “A, B, and/or C,” or “at least one of A, B, and C,” “A, B , or at least one of C,” “at least one of A, B, and/or C,” “at least one selected from A, B, and C,” “at least one selected from A, B, or C,” “A The expression “at least one selected from , B, and/or C” may mean each listed item or all possible combinations of the listed items.
  • At least one selected from A and B means (1) at least one of A, (2) at least one of A, (3) at least one of B, (4) B, (5) at least one of A and B (6) at least one of A and B, (7) at least one of B and A, and (8) both A and B.
  • the expression "based on or according to” describes one or more factors affecting the act or action of a decision, judgment, or action, as described in the phrase or sentence in which the expression is included. used for the purpose of making a decision, this expression does not exclude additional factors affecting the action or behavior of the decision, judgment, or action.
  • a component eg, a first component
  • another component eg, a second component
  • the expression “configured to” means “configured to”, “having the ability to”, “modified to”, “made to”, “to do”, depending on the context. It may have a meaning such as “can be”.
  • the expression is not limited in the sense of "specially designed in hardware”; for example, a processor configured to perform a particular action means a special purpose computer structured through programming to perform that specific action. can mean
  • a Cartesian coordinate system having an X-axis, a Y-axis, and a Z-axis orthogonal to each other may be defined.
  • expressions of "X-axis direction”, “Y-axis direction”, “Z-axis direction”, etc. of a Cartesian coordinate system refer to both sides of which each axis of the Cartesian coordinate system extends, unless otherwise specifically defined in the description. It can mean direction.
  • a + sign attached to the front of each axial direction may mean a positive direction that is one of both directions extending in the corresponding axial direction
  • the - sign attached to the front of each axial direction may indicate a positive direction extending in the corresponding axial direction. It may mean a negative direction, which is the other one of the two directions.
  • FIG. 1 is a diagram illustrating an operation process of an apparatus 100 according to an embodiment of the present disclosure.
  • the device 100 may determine an image for broadcasting a sports match.
  • Sports in the present disclosure may include various sports to which the technology according to the present disclosure is applicable, such as table tennis and tennis, and is not limited to a specific sport. Hereinafter, for convenience, the technology of the present disclosure will be described based on table tennis.
  • the device 100 may communicate with the camera group 110 and/or the image transmission device 170 .
  • the device 100 may acquire a plurality of images 130 obtained by photographing a corresponding match in various ways from the camera group 110 .
  • the device 100 may determine a relay image to be used to relay a corresponding match from among the plurality of images 130 .
  • the device 100 may transmit the determined image to the image transmitting device 170 .
  • the video transmitting device 170 may transmit the video received from the device 100 to viewers to relay the match.
  • the camera group 110 may include one or more cameras. Each camera of the camera group 110 is disposed at various positions with respect to the competition space 120 of the sports match, so that various objects can be photographed from various angles of view. Accordingly, the camera group 110 may generate a plurality of images 130 in which sports matches are captured in various ways.
  • the game space 120 is a space in which a corresponding sports match is performed, and in the case of table tennis, for example, may mean a rectangular space with a length of 14 m, a width of 7 m, and a height of 5 m or more.
  • Each camera may be disposed on each side of the game space 120 , on the upper side, and the like.
  • One camera 112 may photograph a part or the whole of the game space 120 .
  • the other cameras 114 may each photograph the players in the match.
  • Other cameras 116 may generate ball tracking information 140 for tracking the ball by photographing the ball being used in the match.
  • the ball tracking information 140 may be information indicating a three-dimensional position of the ball according to time in the game space 120 .
  • the ball tracking information 140 may be an image captured while tracking the ball, or may be in the form of information indicating the location of the ball by time.
  • one camera of the camera group 110 may be a high-speed camera that captures a high-speed camera image.
  • the high-speed camera may be a camera that continuously shoots an object at a dense frame interval so that the captured image can be reproduced at a slow speed without frame degradation.
  • the high-speed camera may generate a high-speed camera image by photographing a ball or a player.
  • One of the aforementioned cameras eg, the camera 112 , the camera 114 , etc.
  • the device 100 may acquire a plurality of images 130 and ball tracking information 140 from the camera group 110 .
  • the device 100 may determine an image to be used for relaying a match from among the plurality of images 130 based on the ball tracking information 140 and the like.
  • the device 100 may determine, based on the ball tracking information 140 , whether a rally within the match has started or whether the rally has ended.
  • the device 100 transmits an image (hereinafter, referred to as the first image 150) of the match space 120 in which the match is being performed among the plurality of images 130 to be broadcast. It may be determined as an image, and the first image 150 may be transmitted to the image transmitting device 170 . In an embodiment, the first image 150 may be an image of a part or the whole of the game space 120 .
  • the device 100 determines the image (hereinafter, the second image 160) of the player who scored in the rally from among the plurality of images 130 as the image to be broadcast now. , the second image 160 may be transmitted to the image transmission device 170 .
  • the image transmitting device 170 may transmit (eg, the first image 150 , the second image 160 , etc.) received from the device 100 to viewers to relay the corresponding match.
  • the image transmission device 170 may be a broadcasting device that transmits a relay image to a TV in real time, or a server that provides or streams a relay image to each terminal (eg, a smart phone) through the Internet network in real time.
  • device 100 may include communication circuitry 230 , one or more processors 210 , and/or one or more memories 220 as components. In an embodiment, at least one of the components of the device 100 may be omitted or another component may be added to the device 100 . In an embodiment, additionally or alternatively, some components may be integrated and implemented, or a singular or plural entity may be implemented.
  • one or more processors 210 may be referred to as processors 210 .
  • the expression processor 210 may mean a set of one or more processors, unless the context clearly indicates otherwise.
  • one or more memories 220 may be referred to as memories 220 .
  • the expression memory 220 may mean a set of one or more memories, unless the context clearly indicates otherwise.
  • the components inside/outside the device 100 may include a bus, a general purpose input/output (GPIO), a serial peripheral interface (SPI) or a mobile industry processor interface (MIPI), etc. They can be connected to each other through the exchange of information (data, signals, etc.).
  • GPIO general purpose input/output
  • SPI serial peripheral interface
  • MIPI mobile industry processor interface
  • the communication circuit 230 may perform wireless or wired communication between the device 100 and the camera group 110 , or between the device 100 and the image transmitting device 170 .
  • the communication circuit 230 includes enhanced Mobile Broadband (eMBB), Ultra Reliable Low-Latency Communications (URLLC), Massive Machine Type Communications (MMTC), Long-Term Evolution (LTE), LTE Advance (LTE-A).
  • eMBB enhanced Mobile Broadband
  • URLLC Ultra Reliable Low-Latency Communications
  • MMTC Massive Machine Type Communications
  • LTE Long-Term Evolution
  • LTE-A LTE Advance
  • NR New Radio
  • UMTS Universal Mobile Telecommunications System
  • GSM Global System for Mobile communications
  • CDMA Code Division Multiple Access
  • WCDMA Wideband CDMA
  • WiBro Wireless Broadband
  • WiFi Wireless Fidelity
  • Wireless communication according to a method such as Bluetooth, Near Field Communication (NFC), Global Positioning System (GPS), or Global Navigation Satellite System (GNSS) may be performed.
  • the communication circuit 230 performs wired communication according to a method such as Universal Serial Bus (USB), High Definition Multimedia Interface (HDMI), Recommended Standard-232 (RS-232), or Plain Old Telephone Service (POTS). can be done
  • the processor 210 may control at least one component of the device 100 connected to the processor 210 by driving software (eg, a command, a program, etc.). In addition, the processor 210 may perform various operations, processing, data generation, processing, etc. related to the present disclosure. In addition, the processor 210 may load data or the like from the memory 220 or store it in the memory 220 . In one embodiment, the processor 210 obtains the ball tracking information 140 for tracking the ball used in the match from the camera group 110 through the communication circuit 230, and the ball tracking information 140 determines the start or end of an in-match rally based on 170 ), and according to the determination that the rally is over, the communication circuit 230 may be controlled to transmit the second image among the plurality of images 130 to the image transmitting device.
  • driving software eg, a command, a program, etc.
  • the processor 210 may perform various operations, processing, data generation, processing, etc. related to the present disclosure.
  • the processor 210 may load data or the like from the memory 220 or store
  • the memory 220 may store various data. Data stored in the memory 220 is data acquired, processed, or used by at least one component of the device 100 , and may include software (eg, instructions, programs, etc.). Memory 220 may include volatile and/or non-volatile memory. In the present disclosure, commands or programs are software stored in the memory 220 , and various functions are applied so that an operating system, an application, and/or an application for controlling the resources of the device 100 can utilize the resources of the device 100 . It may include middleware provided to . In an embodiment, the memory 220 may store instructions that cause the processor 210 to perform an operation when executed by the processor 210 . In an embodiment, the memory 220 may store various information necessary for implementing the technology of the present disclosure, such as a plurality of images 130 and ball tracking information 140 .
  • the device 100 may be a device of various types.
  • the device 100 may be a computer device, a server, a portable communication device, a device according to a combination of the aforementioned devices, or a chip, board, circuit, etc. within the aforementioned devices.
  • the device 100 of the present disclosure is not limited to the aforementioned devices.
  • the present disclosure may provide a system including the camera group 110 and the device 100 .
  • the present disclosure may also provide a system including the camera group 110 , the device 100 , and the image transmission device 170 .
  • Such systems are also included within the scope of the present disclosure.
  • FIG 3 is a diagram illustrating a process of determining a relay image according to an embodiment of the present disclosure.
  • the processor 210 of the device 100 may determine a relay image suitable for a sports match situation from among the plurality of images 130 .
  • the processor 210 may determine whether the rally is ready to start before the start of the rally. In addition, the processor 210 may determine an image suitable for the start preparation state of the rally and transmit it to the image transmitting device. In more detail, the processor 210 may obtain player movement information for tracking the movement of the athlete from the camera group 110 through the communication circuit 230 before the start of the rally. In the present disclosure, the player movement information may be information indicating the movement of players in a match. For example, the player movement information may be an image obtained by photographing the movement of the player's arms or legs, or information recording positions and postures of the arms and legs by time. The camera group 110 may photograph a player to generate player movement information.
  • the processor 210 may determine whether the rally is ready to start based on the player movement information. In one embodiment, if one of the players takes the ready-to-serve action, the processor 210 may determine that the rally is ready to begin.
  • the memory 220 may store in advance information instructing a movement corresponding to the sub-preparation operation.
  • the processor 210 may determine whether the rally is ready to start based on the player motion information and the information indicating the motion corresponding to the sub-preparation motion.
  • the processor 210 may determine that the rally is ready to start.
  • the memory 220 may store information indicating a scoring situation of a match and a designated position of each player in the immediately preceding rally.
  • the processor 210 may determine where each player should be located in the game space 120 based on the corresponding information.
  • the processor 210 may determine that the rally is ready to start when each player is positioned at a designated location for the rally based on the player movement information.
  • the processor 210 may determine that the rally is ready to start upon receiving a signal indicating that the rally is ready to start from the outside.
  • the processor 210 may obtain the referee movement information from the camera group 110 through the communication circuit 230 .
  • the referee movement information may be information instructing the referee's movement.
  • the referee's movement information may be an image of the referee's arm and leg movements, or information recording positions and postures of the arms and legs by time.
  • the camera group 110 may generate referee motion information by photographing the referee.
  • the processor 210 may determine whether the rally is ready to start based on the player movement information and/or the referee movement information. For example, if the referee makes a certain move, hand signal, etc., it may be determined that the rally is ready to begin.
  • the processor 210 controls the communication circuit 230 to capture an image (hereinafter, a third image 320 ) of a player having the right to serve in the corresponding rally among the plurality of images 130 . )) can be determined as the current video to be broadcast.
  • the processor 210 may transmit the third image 320 to the image transmitting device 170 .
  • the image transmitting device 170 may stop transmitting the previously transmitted image (eg, the image 310 of the game space, etc.) and start transmitting the third image 320 .
  • the processor 210 may determine the start or end of the corresponding rally, and transmit an image suitable for it to the image transmitting device to be transmitted to the viewers. That is, after transmitting the third image 320 , the processor 210 may determine whether a rally has started based on the ball tracking information 140 . According to the determination that the rally has started, the processor 210 may transmit the first image 150 of the game space 120 to the image transmitting device 170 . Accordingly, the image transmitting device 170 may stop transmitting the previously transmitted third image 320 and start transmitting the first image 150 .
  • the processor 210 may determine whether the rally has ended based on the ball tracking information 140 . According to the determination that the rally is over, the processor 210 may transmit the second image 160 of the player who scored in the corresponding rally to the image transmitting device 170 . Accordingly, the image transmitting device 170 may stop transmitting the previously transmitted first image 150 and start transmitting the second image 160 .
  • the game surface 400 is an area that serves as a reference for various judgments related to goals in the game space 120, and the game surface 400 is divided into a first court 410 and a second court 420 based on the center line. can be divided
  • the game surface 400 may be the top surface of the table tennis table, and in the case of tennis, the game surface may be a tennis court according to a predetermined standard. As described above, it will be described based on table tennis for convenience of explanation.
  • the processor 210 of the device 100 may determine whether to start a rally in various ways based on the ball tracking information 140 .
  • the processor 210 may determine that the rally has started based on whether the ball has contacted the playing surface 400 in the ready state for the start of the rally.
  • the processor 210 may determine whether the ball has contacted the playing surface 400 based on the ball tracking information 140 .
  • the processor 210 may compare the position on the z-axis of the ball with the position information of the match surface 400 to determine whether the ball has contacted the match surface 400 .
  • the memory 220 may pre-store location information of the match surface 400 .
  • the processor 210 may determine that the rally has started based on whether the ball has moved vertically upward by more than a preset distance. For example, when the ball leaves the hand of the serving player and moves substantially vertically upwards by 16 cm or more, the processor 210 may determine that a rally has started. In an embodiment, in the ready state for the start of the rally, when the ball moves vertically upward more than a preset distance, it may be determined that the rally has started. In one embodiment, the processor 210 determines that the rally has started based on whether the ball has moved vertically upwards more than a preset distance and then contacted the playing surface 400 within a preset time interval (eg, 3 seconds). may decide
  • the processor 210 of the device 100 may determine the end of the rally. In an embodiment, the processor 210 may determine whether the rally is over based on the information indicating the game surface 400 (hereinafter, referred to as game surface information) and the ball tracking information 140 .
  • the match surface information may include information about the match surface 400 .
  • the match surface information may include information indicating the location of the match surface 400 in the match space 120 .
  • the game surface information may indicate the area occupied by both courts 410 and 420 on the game surface 400 , the positions of the center line, the end line and the side line, the height and position of the net, and the like.
  • the ball may contact 510 one of the two courts of the playing surface 400 (eg, the first court 410 ).
  • the processor 210 may determine this based on the match surface information and the ball tracking information 140 . Then, the processor 210, based on the match surface information and the ball tracking information 140, the ball within a preset first time interval (eg, 3 seconds) on the other of the two courts (eg, the second court 420) It can be determined whether or not to contact (512). Upon determining that the ball has touched another court within a first time interval after it has touched one court, the processor 210 may determine that the rally has not ended and is still ongoing.
  • a preset first time interval eg, 3 seconds
  • processor 210 may decide that the rally is over. For example, when the ball touches the first court 410 and then again contacts the first court 410 ( 522 ), or leaves the playing surface 400 after contacting the first court 410 ( 524 ), etc.; If the second court 420 is not contacted within the first time interval after contacting the first court 410 , the processor 210 may determine that the rally is over.
  • the processor 210 may determine the end of the rally based on the speed of the ball.
  • the processor 210 may determine the speed of the ball based on the ball tracking information 140 .
  • the processor 210 may determine that the corresponding rally is over. For example, when the ball is stationary for a predetermined time or longer in the game surface 400 or the playing space 120 or moves at a speed less than or equal to a predetermined speed, it may be determined that the rally is over ( 526 ).
  • the processor 210 may determine that the rally is over when the ball fails to track and the ball cannot be tracked again for a certain period of time.
  • the processor 210 may obtain the ball tracking information 140 from the camera group 110 .
  • the camera group 110 fails to track the position of the ball, for example, if the ball is obscured by a player or a ping-pong table, or the ball leaves the game space 120 , the position of the ball in the ball tracking information 140 for that time information may be missing.
  • the processor 210 acquires the ball tracking information 140 in which the information for the time when the ball tracking fails, determines whether the time when the ball tracking fails is more than a predetermined time (eg, 30 seconds), and a predetermined time If you fail to track the ball during the period, you may decide that the rally is over.
  • a predetermined time eg, 30 seconds
  • the processor 210 may update the scoring status of the match.
  • the processor 210 may determine, based on the match surface information and the ball tracking information 140 , whether a goal has been scored in the corresponding rally and who scored the goal.
  • the match surface information may include information indicating an area occupied by both courts within the match surface 400 .
  • the processor 210 may determine what trajectory the ball showed before the end of the rally based on the match surface information and the ball tracking information 140 , and determine whether to score and the player who scored accordingly.
  • the processor 210 scores based on which courts 410 and 420 the ball touched in the last two instances of contacting the playing surface 400 in reverse order before the end of the rally. You can decide whether or not to score and the player who scored.
  • the ball when the ball comes into contact with the first court 410 after it contacts the first court 410 , it may be determined that the player located at the end of the second court 420 has scored. If the ball moves below a certain speed or fails to track the ball after the ball contacts the first court 410 and subsequently touches the second court 420, the score is deemed to have been scored by the player located at the end of the first court 410 can be decided.
  • the processor 210 may determine whether a score was scored in the rally and who scored the score, further based on the player movement information.
  • the processor 210 may determine whether a score was scored in the rally and who scored the score, further based on the player movement information.
  • the ball contacts the first court 410 immediately after the player on the first court 410 performs the receiving operation, it may be determined that the player on the second court 420 scored the goal.
  • the ball directly contacts the second court 420 immediately after the player on the first court 410 performs the serve, it may be determined that the player on the second court 420 scored.
  • the ball moves below a certain speed immediately after the player on the first court 410 performs a serve or receive operation or fails to track the ball, it may be determined that the player on the second court 420 scored the goal.
  • the processor 210 may update information indicating the scoring situation of the corresponding sports match (hereinafter, scoring situation information) based on the determination. That is, the processor 210 may increase the score corresponding to the scoring player.
  • the processor 210 may determine one of the images captured by each of the players as the second image 160 of the player who scored in the corresponding rally. . Thereafter, the processor 210 may determine the second image 160 as an image to be broadcast currently, and transmit the second image 160 to the image transmitting device 170 .
  • FIG. 6 is a diagram illustrating a process of determining an image to be broadcast when the end of a rally is determined, according to an embodiment of the present disclosure.
  • the processor 210 determines, among the plurality of images 130 , the second image 160 of the player who scored in the rally as the image to be broadcast now, The second image 160 may be transmitted to the image transmitting device 170 .
  • the processor 210 transmits the second image 160 and after a predetermined time (eg, 5 seconds) elapses, determines another image to be relayed, and additionally transmits it to the image transmission device 170 .
  • a predetermined time eg, 5 seconds
  • the processor 210 may additionally transmit an image (hereinafter, a fourth image 640) of a player having a serving right in the next rally of the finished rally to the image transmitting device 170.
  • the memory 220 may store information indicating a player who had the right to serve in the finished rally and scoring situation information updated according to the end of the rally.
  • the processor 210 may determine the player who has the right to serve in the next rally of the finished rally based on the information indicating the player who had the right to serve in the finished rally and the scoring situation information updated according to the end of the rally. For example, every time two points are scored, or every point scored if the scoring situation is 10:10, the right to serve may need to be changed to a different player or team.
  • the processor 210 may determine a player of the opposite team, not the player who has the right to serve in the finished rally, as the player with the right to serve in the next rally. If the serving player should not be changed in the scoring situation, the processor 210 may determine the player who has the right to serve in the finished rally as the player who has the right to serve in the next rally.
  • the processor 210 may determine a fourth image 640 of the player who has the right to serve in the next rally from among the plurality of images 130 . After transmitting the second image 160 , the processor 210 may control the communication circuit 230 to transmit the fourth image 640 to the image transmitting device 170 . In an embodiment, after a predetermined time (eg, 5 seconds) has elapsed after transmitting the second image 160 , the fourth image 640 may be transmitted to the image transmitting device 170 . Accordingly, the image transmitting device 170 may stop transmitting the previously transmitted second image 160 and start transmitting the fourth image 640 .
  • a predetermined time eg, 5 seconds
  • the processor 210 is an image to be additionally transmitted to the image transmitting device 170 after the second image 160 based on the number of times the ball has returned between the two courts in the finished rally can be decided Specifically, the processor 210 may determine the number of times the ball reciprocates between both courts within the finished rally, based on the ball tracking information 140 . The processor 210 may compare the determined number of round trips with preset reference times.
  • the processor 210 may transmit a replay image 650 for the finished rally to the image transmitting device 170 .
  • the processor 210 transmits the second image 160 and then controls the communication circuit 230 to sequentially transmit the image with the replay image 650 and the fourth image 640 on the image transmitting device 170 . It can be transmitted to (620).
  • a predetermined time eg, 5 seconds
  • the replay image 650 and the fourth image 640 are sequentially transmitted at a predetermined time interval. may be sent to (170).
  • the image transmitting device 170 stops transmitting the previously transmitted second image 160 , transmits the replay image 650 , and then transmits the fourth image 640 after a predetermined time elapses again. can do.
  • the processor 210 may transmit the high-speed camera image 660 for the finished rally to the image transmitting device 170 .
  • the second number of times may be smaller than the first number of times. For example, when a score is scored by a sub (serve point, the number of round trips is 0), the high-speed camera image 660 may be utilized for relay.
  • the processor 210 may control the communication circuit 230 to sequentially transmit the high-speed camera image 660 and the fourth image 640 to the image transmission device 170 . There is (630).
  • the high-speed camera image 660 and the fourth image 640 are sequentially transmitted with a predetermined time interval, respectively. may be transmitted to the device 170 . Accordingly, the image transmitting device 170 stops transmitting the previously transmitted second image 160 , transmits the high-speed camera image 660 , and then returns the fourth image 640 after a predetermined time elapses. can be sent
  • the high-speed camera image 660 may be a high-speed camera image of a part of the finished rally. In an embodiment, an image captured by a high-speed camera from the start time of the rally to the end of the rally may be determined as the high-speed camera image 660 .
  • An image captured by a high-speed camera for a predetermined time interval (eg, 10 seconds) may be determined as the high-speed camera image 660 based on a point in time when the amount of change in motion is equal to or greater than a predetermined value.
  • the processor 210 may generate a high-speed camera image 660 based on the ball tracking information 140 and player movement information.
  • the processor 210 sequentially displays at least two images selected from the second image 160 , the replay image 650 , the high-speed camera image 660 and the fourth image 640 , in a predetermined order. may be transmitted to the image transmission device 170 as
  • FIG. 7 is a diagram illustrating a process of generating a replay image 650 according to an embodiment of the present disclosure.
  • the processor 210 may generate the replay image 650 for the rally in various ways.
  • the processor 210 may determine a time interval from a time when it is determined that the rally is started to a time when it is determined that the corresponding rally is over. The method of determining the start and end of the rally is the same as described above.
  • the processor 210 may determine one of the plurality of images 130 corresponding to the corresponding time interval as the replay image 650 . For example, the processor 210 extracts an image portion from the start to the end of the rally from the image of the entire game space 120 among the plurality of images 130 , and then converts the extracted portion into the replay image 650 . can decide
  • the processor 210 may detect the occurrence of various events during a sports match, and generate a replay image 650 according to the occurrence of the corresponding event.
  • the processor 210 may determine that specific events within a match have occurred based on the plurality of images 130 from the camera group 110 , the ball tracking information 140 , the player movement information, and the referee movement information.
  • the processor 210 may determine a time interval from the time when a specific event occurs to the time when another specific event occurs, and determine one of the plurality of images 130 corresponding to the time interval as the replay image 650 . there is.
  • the processor 210 starts to separately store images from a point in time when a specific event (hereinafter referred to as a first event) occurs, so that two other specific events (hereinafter referred to as a second event and a third event) are sequentially performed.
  • a specific event hereinafter referred to as a first event
  • two other specific events hereinafter referred to as a second event and a third event
  • the image from the first event to the third event may be determined as the replay image 650 .
  • the processor 210 may analyze the match based on the plurality of images 130 , the ball tracking information 140 , the player movement information, and the referee movement information ( 710 ).
  • the processor 210 may determine that a primary event has occurred during the match according to the analysis process ( 720 ). If the primary event does not occur, the analysis process for the match continues.
  • the primary event may be, for example, "the beginning of a rally". The method of determining the start of the rally is the same as described above.
  • the processor 210 may select one image from among the plurality of images 130 (eg, an image of the entire game space).
  • the processor 210 may start to separately store an image after the first event occurs with respect to the selected image ( 730 ). In parallel with the primary event detection and image storage, the processor 210 may continue to perform the match analysis process.
  • the processor 210 may determine that a secondary event has occurred after the primary event according to the analysis process ( 740 ). If the secondary event does not occur, the analysis process for the match continues.
  • the secondary event may be, for example, "the number of rounds of the ball in the rally between the two courts reaches the first number". The number of round trips may be determined based on the ball tracking information 140 , as described above.
  • the processor 210 may continue to store the stored image after the detection of the first event. Also, the processor 210 may continue to analyze the match.
  • the processor 210 may determine that a tertiary event has occurred after the secondary event according to the analysis process ( 750 ). If the tertiary event does not occur, the analysis process for the match continues.
  • the tertiary event may be, for example, “end of the rally”. The method of determining the end of the rally is the same as described above.
  • the processor 210 may extract a partial image corresponding to a time interval from the occurrence of the first event to the occurrence of the third event from among the previously selected images and determine it as the replay image 650 ( 760 ). As described above, the processor 210 may transmit the replay image 650 to the image transmission device 170 .
  • the replay image in progress may stop the process of generating the , and restart the process of generating a replay image from the beginning ( 710 ).
  • each of the first to third events may be set as various events. For example, “the ball approaches the net, end line, or side line within a certain distance”, “the instantaneous speed of the ball reaches a certain value or more”, “the amount of change in the player's position in the playing space 120 or the amount of change in the movement of the player” Reaching more than this certain value”, “the ball moves from one court to another after serving", etc. can be set as secondary events.
  • a specific area in the game space 120 may be set as a search area, and the occurrence of an event may be determined based on the movement of a ball or a player in the search area.
  • a virtual plane passing through the center line may be set as a search area, and a ball passing through the search area may be set as a secondary event.
  • the processor 210 may determine a corresponding secondary event based on the search area and the ball tracking information 140 . For example, in the case of baseball, a certain part of the pitcher's mound is set as the search area, and when it is determined that the pitcher threw the baseball based on the search area and the motion information of the pitcher, this may be determined as the primary event.
  • a case in which "the batter hits the baseball thrown by the pitcher” or “detects that the ball or strike has occurred from the image taken from the electronic board” may be determined as the secondary event.
  • the case of "detecting that an out count has changed or a score has occurred from the image taken from the electronic sign board” may be determined as the tertiary event.
  • the processor 210 may generate the replay image 650 by performing slow reproduction (eg, reproduction at 0.8x speed) on specific images in the above-described manner.
  • the processor 210 displays a real-time image (eg, the entire game space) of the match in the form of a picture-in-picture (PIP) in one area (eg, the lower right corner of the image) of the replay image 650 . recorded video) may be included.
  • PIP picture-in-picture
  • the rally analysis image may include analysis information about the corresponding rally.
  • the analysis information on the rally may include information indicating in time series a position where the ball contacts the match surface 400 in the corresponding rally.
  • the rally analysis image according to the illustrated embodiment displays which point on each court of the game surface 400 during the rally the ball came into contact with, in the order of contact. According to an embodiment, each time point at which the ball is in contact may be displayed.
  • the processor 210 may generate analysis information on the rally based on the plurality of images 130 , the ball tracking information 140 , player movement information, and referee movement information.
  • the processor 210 may generate a rally analysis image based on analysis information on the rally in various situations.
  • the processor 210 may transmit the generated rally analysis image to the image transmission device 170 to be relayed.
  • the processor 210 may generate the rally analysis image based on the analysis information on the rally in response to receiving an input instructing to generate the rally analysis image.
  • the processor 210 may generate a rally analysis image based on analysis information on the rally. In an embodiment, when the start of the next rally is delayed for a predetermined time or more, the processor 210 may generate a rally analysis image based on analysis information on the rally. In one embodiment, the processor 210 determines whether it is a break time during the match based on the scoring situation information updated according to the end of the rally, and according to the determination that it corresponds to the break time, A rally analysis image may be generated based on the analysis information. For example, when the sum of the scores of both players or both teams is a multiple of 6 and toweling (time to wipe sweat) is given, a rally analysis image may be generated and transmitted to the image transmitting device 170 .
  • the processor 210 may generate a rally analysis image including analysis information for the corresponding rally.
  • the processor 210 may determine whether a drive contention has occurred during the rally based on the ball tracking information 140 . Specifically, the processor 210 may determine an average value of the horizontal speed of the ball in the rally based on the ball tracking information 140 .
  • the processor 210 may compare the average value with a preset value. According to a determination that the corresponding average value is equal to or greater than a preset value, the processor 210 may generate a rally analysis image including analysis information on the corresponding rally.
  • the processor 210 may control the communication circuit 230 to transmit the rally analysis image to the image transmitting device 170 .
  • the rally analysis image may be transmitted to the image transmission device 170 before or after transmission of the replay image 650 or before or after transmission of the high-speed camera image 660 .
  • the processor 210 may include a real-time image (eg, an image of the entire game space) of the match in a PIP form in an area (eg, the lower right corner of the image) of the high-speed camera image 660 . may be
  • a match may consist of an odd number of games. For example, a table tennis match may be conducted in a best-of-seven system with a maximum of 7 games. In each game, the first player or team to score 11 points wins.
  • the game analysis image may include analysis information about the game.
  • the analysis information about the game may include at least one information selected from the sub-direction, serve success rate, attack direction (the position where the ball contacted the game surface during successful attack) and attack success rate for each player (or team) in the game. there is.
  • the analysis information for the game may further include information on average speed of a ball hit by a specific player in the game.
  • the attack direction of the second player is the top 39.3%, the middle 46.4%, and the bottom 14.3%. It is also indicated that the average speed of the ball hit by player No. 2 is 17.4 km/h.
  • the processor 210 may generate analysis information on the game based on the plurality of images 130 , the ball tracking information 140 , the player movement information and the referee movement information.
  • the processor 210 may generate a game analysis image based on analysis information on the game.
  • the processor 210 may determine whether a game including the corresponding rally is over based on the scoring situation information updated according to the end of the rally (eg, when one player reaches 11 points, etc.) . According to the determination that the game is over, the processor 210 may generate a game analysis image including analysis information on the corresponding game.
  • the processor 210 may generate the game analysis image based on the analysis information on the game as it receives an input instructing to generate the game analysis image.
  • the processor 210 may control the communication circuit 230 to transmit the game analysis image to the image transmitting device 170 . Accordingly, the game analysis video may be relayed.
  • VAR video assistant referee
  • the VAR image may be an image for providing information to assist the judge in judgment when judgment is ambiguous in a sports match.
  • the VAR image may provide information to assist in various judgments related to the line in/out of the ball, whether the ball has contacted the table tennis club, and other goals scored.
  • the VAR image according to the illustrated embodiment displays the trajectory of the ball during the rally in computer graphics.
  • the processor 210 may generate a VAR image based on the plurality of images 130 , ball tracking information 140 , player movement information, and referee movement information. For example, a VAR image in which the track of the ball is displayed in computer graphics may be generated based on the ball tracking information 140 .
  • the processor 210 may generate a VAR image in various situations. In an embodiment, the processor 210 may generate a VAR image based on various types of information upon receiving an input instructing to generate a VAR image.
  • the processor 210 may transmit the generated VAR image to the image transmission device 170 to be relayed.
  • the relay image determining method 1100 may be performed by the apparatus 100 .
  • the method 1100 includes the steps of obtaining ball tracking information from a camera group (S1110), determining the start or end of a rally based on the ball tracking information (S1120), and a first image of the match space It may include transmitting to the video transmitting device (S1130), and/or transmitting a second image of the athlete who scored in the rally to the video transmitting device (S1140).
  • the processor 210 may obtain the ball tracking information 140 from the camera group 110 through the communication circuit 230 .
  • the processor 210 may determine the start or end of the rally based on the ball tracking information 140 . According to the determination that the rally has started, the processor 210 may control the communication circuit 230 to transmit the first image 150 among the plurality of images 130 to the image transmitting device 170 (step S1130). . According to the determination that the rally has ended, the processor 210 may control the communication circuit 230 to transmit the second image 160 among the plurality of images 130 to the image transmission device 170 (step S1140). .
  • the method 1100 includes: obtaining, by the processor 210 , player movement information from the camera group 110 through the communication circuit 230 before the start of the rally; determining whether a rally is ready to begin based on the player movement information; and/or controlling the communication circuit 230 according to the determination that the rally is ready to start, and transmitting the third image 320 of the plurality of images 130 to the image transmitting device 170. there is.
  • step S1120 determines that the rally has started, based on whether the ball has touched the playing surface 400 in the playing space 120 within a preset time interval after the ball has moved vertically upwards more than a preset distance may include the step of
  • step S1120 may include determining that the rally has ended, based on the match surface information and/or the ball tracking information 140 .
  • step S1140 may include, according to the determination that the rally is over, determining whether to score in the rally and the player who scored in the rally, based on the match surface information and/or the ball tracking information 140 ; and/or updating the scoring situation information based on whether or not the score has been scored and the player who scored the score, and determining the second image 160 from among the plurality of images 130 .
  • the step S1140 may include: determining a player having the right to serve in a next rally of the corresponding rally based on the information indicating the player who has the right to serve in the corresponding rally and/or the updated scoring situation information; and/or after transmitting the second image 160 , controlling the communication circuit 230 to transmit the fourth image 640 among the plurality of images 130 to the image transmitting device 170 . can do.
  • the step of transmitting the fourth image 640 to the image transmitting device 170 includes, by the processor 210 , based on the ball tracking information 140 , when the ball moves back and forth between the two courts in the rally. determining the number of times; transmitting the replay image 650 and the fourth image 640 sequentially to the image transmission device 170 after transmitting the second image 160 according to a determination that the number of round trips is equal to or greater than the first number; and/or according to a determination that the number of round trips is less than or equal to the second number of times, after transmitting the second image 160 , the high-speed camera image 660 and the fourth image 640 are sequentially transmitted to the image transmission device 170 . It may include the step of transmitting.
  • Methods according to the present disclosure may be computer-implemented methods.
  • each step of the methods is shown and described in a predetermined order, but each step may be performed in an order that can be arbitrarily combined according to the present disclosure, in addition to being performed sequentially.
  • at least some of the steps may be performed in parallel, iteratively or heuristically. This disclosure does not exclude making changes or modifications to the methods.
  • at least some steps may be omitted or other steps may be added.
  • the software may be software for implementing various embodiments of the present disclosure described above.
  • Software may be inferred from various embodiments of the present disclosure by programmers in the art.
  • software may be machine-readable instructions (eg, code or code segments) or programs.
  • the device is a device capable of operating according to a command called from a recording medium, and may be, for example, a computer.
  • the device may be the device 100 according to embodiments of the present disclosure.
  • the processor of the device may execute the called command to cause components of the device to perform a function corresponding to the command.
  • the processor may be the processor 210 according to embodiments of the present disclosure.
  • the recording medium may refer to any type of recording medium in which data that can be read by a device is stored.
  • the recording medium may include, for example, ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage device, and the like.
  • the recording medium may be the memory 220 .
  • the recording medium may be implemented as a distributed form in a computer system connected through a network.
  • the software may be distributed, stored, and executed in a computer system or the like.
  • the recording medium may be a non-transitory recording medium.
  • a non-transitory recording medium means a medium that exists regardless of whether data is semi-permanently or temporarily stored, and does not include a transitory propagated signal.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computational Linguistics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Mathematical Physics (AREA)
  • Molecular Biology (AREA)
  • Marketing (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Business, Economics & Management (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Psychiatry (AREA)
  • Human Computer Interaction (AREA)
  • Social Psychology (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Studio Circuits (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Image Analysis (AREA)

Abstract

본 개시는 스포츠 중계를 위한 영상을 결정하는 장치를 제안한다. 본 개시에 따른 장치는, 카메라 그룹이 촬영한 스포츠 매치(match)의 복수의 영상 중 상기 매치를 중계할 영상을 결정할 수 있다. 장치의 프로세서는, 통신 회로를 통하여, 상기 카메라 그룹으로부터 상기 매치에 사용되는 공을 추적하기 위한 공 추적 정보를 획득하고, 상기 공 추적 정보에 기초하여, 상기 매치 내 랠리(rally)의 시작 또는 종료를 결정하고, 상기 랠리가 시작되었다는 결정에 따라, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 매치의 경기 공간(playing space)을 촬영한 제1 영상을 상기 영상 송출 기기로 전송하고, 상기 랠리가 종료되었다는 결정에 따라, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 랠리에서 득점한 선수를 촬영한 제2 영상을 상기 영상 송출 기기로 전송할 수 있다.

Description

스포츠 중계를 위한 영상을 결정하는 장치, 방법 및 명령을 기록한 기록 매체
본 개시는 스포츠 중계를 위한 영상을 결정하는 기술에 관한 것이다.
스포츠 매치(match)를 중계하기 위하여 하나 이상의 카메라를 포함하는 카메라 그룹이 사용될 수 있다. 카메라 그룹의 각 카메라는 경기 공간(playing space)을 기준으로 다양한 위치에 배치되어, 해당 매치의 다양한 대상을 다양한 화각으로 촬영할 수 있다. 카메라 그룹에 의해 생성된 다양한 영상들 중 적어도 하나가 해당 매치의 중계 영상으로 결정되어, 시청자들에게 송출될 수 있다. 이 때 스포츠 매치에 대한 중계가 원활히 이루어지기 위하여, 해당 매치의 상황에 적합한 영상이 중계 영상으로 결정될 필요가 있다. 또한 매치의 상황이 시시각각 변함에 따라 다른 영상이 다시 결정되어, 중계 화면의 전환이 적절히 이루어지게 할 필요도 있다.
다양한 영상 중 중계 영상으로 송출될 영상을 결정하는 과정은 인간(예: 방송국 프로듀서 등)에 의해 수행될 수 있다. 그러나 인간에 의한 중계 영상 결정 방식은, 개인의 임의적 판단에 의존해야 한다는 점, 개인의 경험과 역량에 의해 중계 품질이 좌우될 수 있다는 점, 실수로 매치의 중요한 장면이 중계되지 못할 수 있다는 점 등의 문제가 있을 수 있다.
본 개시는 스포츠 중계를 위한 영상을 결정하는 기술을 제공한다.
본 개시의 한 측면으로서, 스포츠 중계를 위한 영상을 결정하는 장치가 제공될 수 있다. 본 장치는, 카메라 그룹이 촬영한 스포츠 매치(match)의 복수의 영상 중 상기 매치를 중계할 영상을 결정하는 장치일 수 있다. 본 장치는, 상기 카메라 그룹 및 영상 송출 기기와 통신하는 통신 회로; 하나 이상의 프로세서; 및 상기 하나 이상의 프로세서에 의한 실행 시, 상기 하나 이상의 프로세서가 연산을 수행하도록 하는 명령이 저장된 하나 이상의 메모리를 포함하고, 상기 하나 이상의 프로세서는, 상기 통신 회로를 통하여, 상기 카메라 그룹으로부터 상기 매치에 사용되는 공을 추적하기 위한 공 추적 정보를 획득하고, 상기 공 추적 정보에 기초하여, 상기 매치 내 랠리(rally)의 시작 또는 종료를 결정하고, 상기 랠리가 시작되었다는 결정에 따라, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 매치의 경기 공간(playing space)을 촬영한 제1 영상을 상기 영상 송출 기기로 전송하고, 상기 랠리가 종료되었다는 결정에 따라, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 랠리에서 득점한 선수를 촬영한 제2 영상을 상기 영상 송출 기기로 전송할 수 있다.
일 실시예에서, 상기 하나 이상의 프로세서는, 상기 랠리의 시작 전, 상기 통신 회로를 통하여, 상기 카메라 그룹으로부터 선수의 움직임을 추적하기 위한 선수 움직임 정보를 획득하고, 상기 선수 움직임 정보에 기초하여, 상기 랠리가 시작될 준비가 되었는지 여부를 결정하고, 상기 랠리가 시작될 준비가 되었다는 결정에 따라, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 랠리에서 서브권을 가진 선수를 촬영한 제3 영상을 상기 영상 송출 기기로 전송할 수 있다.
일 실시예에서, 상기 하나 이상의 프로세서는, 상기 공이 수직 상방으로 미리 설정된 거리 이상 이동하였는지 여부에 기초하여, 상기 랠리가 시작되었음을 결정할 수 있다.
일 실시예에서, 상기 하나 이상의 프로세서는, 상기 공이 수직 상방으로 미리 설정된 거리 이상 이동한 후, 미리 설정된 시간 간격 내에 상기 경기 공간 내 시합 표면에 접촉하였는지 여부에 기초하여, 상기 랠리가 시작되었음을 결정할 수 있다.
일 실시예에서, 상기 하나 이상의 프로세서는, 상기 경기 공간 내 시합 표면을 지시하는 시합 표면 정보 및 상기 공 추적 정보에 기초하여, 상기 랠리가 종료되었음을 결정할 수 있다.
일 실시예에서, 상기 하나 이상의 프로세서는, 상기 공이 상기 시합 표면의 한 코트에 접촉한 후 미리 설정된 제1 시간 간격 내에 상기 시합 표면의 다른 한 코트에 접촉하지 않는 경우 또는 상기 공의 속력이 미리 설정된 제2 시간 간격 이상 일정량 이하를 유지하는 경우, 상기 랠리가 종료되었음을 결정할 수 있다.
일 실시예에서, 상기 하나 이상의 프로세서는, 상기 랠리가 종료되었다는 결정에 따라, 상기 시합 표면 정보 및 상기 공 추적 정보에 기초하여, 상기 랠리 내 득점 여부 및 상기 랠리에서 득점한 선수를 결정하고, 상기 득점 여부 및 상기 득점한 선수에 기초하여, 상기 매치의 득점 상황 정보를 갱신하고, 상기 복수의 영상 중 상기 제2 영상을 결정할 수 있다.
일 실시예에서, 상기 하나 이상의 프로세서는, 상기 랠리에서 서브권을 가지는 선수를 지시하는 정보 및 상기 갱신된 득점 상황 정보에 기초하여, 상기 랠리의 다음 랠리에서 서브권을 가진 선수를 결정하고, 상기 제2 영상을 전송한 이후, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 다음 랠리에서 서브권을 가진 선수를 촬영한 제4 영상을 상기 영상 송출 기기로 전송할 수 있다.
일 실시예에서, 상기 하나 이상의 프로세서는, 상기 공 추적 정보에 기초하여, 상기 랠리 내에서 상기 공이 양 코트 사이를 왕복한 횟수를 결정하고, 상기 왕복한 횟수가 제1 횟수 이상이라는 결정에 따라, 상기 제2 영상을 전송한 이후, 상기 랠리의 리플레이 영상과 상기 제4 영상을 순차적으로 상기 영상 송출 기기로 전송하고, 상기 왕복한 횟수가 상기 제1 횟수보다 작은 제2 횟수 이하라는 결정에 따라, 상기 제2 영상을 전송한 이후, 상기 랠리를 고속 카메라로 촬영한 고속 카메라 영상과 상기 제4 영상을 순차적으로 상기 영상 송출 기기로 전송할 수 있다.
일 실시예에서, 상기 하나 이상의 프로세서는, 상기 복수의 영상 중 상기 랠리가 시작된 것으로 결정한 시점부터 상기 랠리가 종료된 것으로 결정한 시점까지의 시간 간격에 해당하는 적어도 한 영상에 기초하여 상기 리플레이 영상을 생성할 수 있다.
일 실시예에서, 상기 하나 이상의 프로세서는, 상기 공 추적 정보에 기초하여, 상기 랠리 내 상기 공의 수평 방향 속력의 평균값을 결정하고, 상기 평균값이 미리 설정된 값 이상이라는 결정에 따라, 상기 랠리에 대한 분석 정보를 포함하는 랠리 분석 영상을 생성하고, 상기 제4 영상을 전송하기 이전에, 상기 통신 회로를 제어하여, 상기 랠리 분석 영상을 상기 영상 송출 기기로 전송하고, 상기 랠리에 대한 분석 정보는, 상기 랠리에서 상기 공이 상기 시합 표면에 접촉한 위치를 시계열적으로 지시하는 정보를 포함할 수 있다.
일 실시예에서, 상기 하나 이상의 프로세서는, 상기 득점 상황 정보에 기초하여, 상기 랠리가 포함된 게임이 종료되었음을 결정하고, 상기 게임이 종료되었다는 결정에 따라, 상기 게임에 대한 분석 정보를 포함하는 게임 분석 영상을 생성하고, 상기 통신 회로를 제어하여, 상기 게임 분석 영상을 상기 영상 송출 기기로 전송하고, 상기 게임에 대한 분석 정보는, 상기 게임 내 선수별 서브 방향, 서브 성공률, 공격 방향 및 공격 성공률 중에서 선택된 적어도 하나의 정보를 포함할 수 있다.
본 개시의 한 측면으로서, 스포츠 중계를 위한 영상을 결정하는 방법이 제공될 수 있다. 본 방법은, 카메라 그룹이 촬영한 스포츠 매치의 복수의 영상 중 상기 매치를 중계할 영상을 결정하는 방법일 수 있다. 본 방법은, 하나 이상의 프로세서가, 통신 회로를 통하여, 상기 카메라 그룹으로부터 상기 매치에 사용되는 공을 추적하기 위한 공 추적 정보를 획득하는 단계; 상기 공 추적 정보에 기초하여, 상기 매치 내 랠리의 시작 또는 종료를 결정하는 단계; 상기 랠리가 시작되었다는 결정에 따라, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 매치의 경기 공간을 촬영한 제1 영상을 영상 송출 기기로 전송하는 단계; 및 상기 랠리가 종료되었다는 결정에 따라, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 랠리에서 득점한 선수를 촬영한 제2 영상을 상기 영상 송출 기기로 전송하는 단계를 포함할 수 있다.
일 실시예에서, 본 방법은 상기 하나 이상의 프로세서가, 상기 랠리의 시작 전, 상기 통신 회로를 통하여, 상기 카메라 그룹으로부터 선수의 움직임을 추적하기 위한 선수 움직임 정보를 획득하는 단계; 상기 선수 움직임 정보에 기초하여, 상기 랠리가 시작될 준비가 되었는지 여부를 결정하는 단계; 및 상기 랠리가 시작될 준비가 되었다는 결정에 따라, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 랠리에서 서브권을 가진 선수를 촬영한 제3 영상을 상기 영상 송출 기기로 전송하는 단계를 더 포함할 수 있다.
일 실시예에서, 상기 매치 내 랠리의 시작 또는 종료를 결정하는 단계는, 상기 공이 수직 상방으로 미리 설정된 거리 이상 이동한 후, 미리 설정된 시간 간격 내에 상기 경기 공간 내 시합 표면에 접촉하였는지 여부에 기초하여, 상기 랠리가 시작되었음을 결정하는 단계를 포함할 수 있다.
일 실시예에서, 상기 매치 내 랠리의 시작 또는 종료를 결정하는 단계는, 상기 경기 공간 내 시합 표면을 지시하는 시합 표면 정보 및 상기 공 추적 정보에 기초하여, 상기 랠리가 종료되었음을 결정하는 단계를 포함할 수 있다.
일 실시예에서, 상기 제2 영상을 상기 영상 송출 기기로 전송하는 단계는, 상기 랠리가 종료되었다는 결정에 따라, 상기 시합 표면 정보 및 상기 공 추적 정보에 기초하여, 상기 랠리 내 득점 여부 및 상기 랠리에서 득점한 선수를 결정하는 단계; 및 상기 득점 여부 및 상기 득점한 선수에 기초하여, 상기 매치의 득점 상황 정보를 갱신하고, 상기 복수의 영상 중 상기 제2 영상을 결정하는 단계를 포함할 수 있다.
일 실시예에서, 상기 제2 영상을 상기 영상 송출 기기로 전송하는 단계는, 상기 랠리에서 서브권을 가지는 선수를 지시하는 정보 및 상기 갱신된 득점 상황 정보에 기초하여, 상기 랠리의 다음 랠리에서 서브권을 가진 선수를 결정하는 단계; 및 상기 제2 영상을 전송한 이후, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 다음 랠리에서 서브권을 가진 선수를 촬영한 제4 영상을 상기 영상 송출 기기로 전송하는 단계를 더 포함할 수 있다.
일 실시예에서, 상기 제4 영상을 상기 영상 송출 기기로 전송하는 단계는, 상기 공 추적 정보에 기초하여, 상기 랠리 내에서 상기 공이 양 코트 사이를 왕복한 횟수를 결정하는 단계; 상기 왕복한 횟수가 제1 횟수 이상이라는 결정에 따라, 상기 제2 영상을 전송한 이후, 상기 랠리의 리플레이 영상과 상기 제4 영상을 순차적으로 상기 영상 송출 기기로 전송하는 단계; 및 상기 왕복한 횟수가 상기 제1 횟수보다 작은 제2 횟수 이하라는 결정에 따라, 상기 제2 영상을 전송한 이후, 상기 랠리를 고속 카메라로 촬영한 고속 카메라 영상과 상기 제4 영상을 순차적으로 상기 영상 송출 기기로 전송하는 단계를 포함할 수 있다.
본 개시의 한 측면으로서, 스포츠 중계를 위한 영상을 결정하는 명령을 기록한 비일시적 컴퓨터 판독 가능 기록 매체가 제공될 수 있다. 본 개시의 한 측면에 따른 기록 매체에 기록된 명령은, 컴퓨터 상에서 수행되기 위한 명령으로서, 하나 이상의 프로세서에 의한 실행시, 해당 하나 이상의 프로세서가, 통신 회로를 통하여, 카메라 그룹으로부터 스포츠 매치에 사용되는 공을 추적하기 위한 공 추적 정보를 획득하고, 상기 공 추적 정보에 기초하여, 상기 매치 내 랠리의 시작 또는 종료를 결정하고, 상기 랠리가 시작되었다는 결정에 따라, 상기 통신 회로를 제어하여, 상기 카메라 그룹이 촬영한 상기 매치의 복수의 영상 중 상기 매치의 경기 공간을 촬영한 제1 영상을 영상 송출 기기로 전송하고, 상기 랠리가 종료되었다는 결정에 따라, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 랠리에서 득점한 선수를 촬영한 제2 영상을 상기 영상 송출 기기로 전송하도록 할 수 있다.
본 개시의 기술에 의하면, 중계 영상으로 송출될 영상을 객관적이고 정확하게 결정할 수 있다. 또한 본 개시의 기술에 의하면, 스포츠 매치의 중요한 장면이 누락될 확률을 줄일 수 있다. 이에 따라 스포츠 매치의 중계 품질이 일관되게 유지될 수 있다.
또한 본 개시의 기술에 의하면, 중계 영상의 불필요한 전환을 감소시켜, 영상 송출 기기 등을 포함한 전체 중계 시스템의 연산 부담을 낮출 수 있다.
도 1은 본 개시의 일 실시예에 따른 장치의 동작 과정을 도시한 도면이다.
도 2는 본 개시의 일 실시예에 따른 장치의 블록도를 나타낸 도면이다.
도 3은 본 개시의 일 실시예에 따른 중계 영상의 결정 과정을 도시한 도면이다.
도 4는 본 개시의 일 실시예에 따른 스포츠 매치의 시합 표면을 도시한 도면이다.
도 5는 본 개시의 일 실시예에 따른 랠리의 계속 및 종료를 도시한 도면이다.
도 6은 본 개시의 일 실시예에 따른, 랠리의 종료가 결정됨에 따라 중계될 영상을 결정하는 과정을 도시한 도면이다.
도 7은 본 개시의 일 실시예에 따른 리플레이 영상의 생성 과정을 도시한 도면이다.
도 8은 본 개시의 일 실시예에 따른 랠리 분석 영상을 도시한 도면이다.
도 9는 본 개시의 일 실시예에 따른 게임 분석 영상을 도시한 도면이다.
도 10은 본 개시의 일 실시예에 따른 VAR(Video Assistant Referee) 영상을 도시한 도면이다.
도 11은 본 개시의 일 실시예에 따른 중계 영상 결정 방법을 나타낸 도면이다.
본 문서에 기재된 다양한 실시예들은, 본 개시의 기술적 사상을 명확히 설명하기 위한 목적으로 예시된 것이며, 이를 특정한 실시 형태로 한정하려는 것이 아니다. 본 개시의 기술적 사상은, 본 문서에 기재된 각 실시예의 다양한 변경(modifications), 균등물(equivalents), 대체물(alternatives) 및 각 실시예의 전부 또는 일부로부터 선택적으로 조합된 실시예를 포함한다. 또한 본 개시의 기술적 사상의 권리 범위는 이하에 제시되는 다양한 실시예들이나 이에 대한 구체적 설명으로 한정되지 않는다.
기술적이거나 과학적인 용어를 포함해서, 본 문서에서 사용되는 용어들은, 달리 정의되지 않는 한, 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자에게 일반적으로 이해되는 의미를 가질 수 있다.
본 문서에서 사용되는 "포함한다", "포함할 수 있다", "구비한다", "구비할 수 있다", "가진다", "가질 수 있다" 등과 같은 표현들은, 대상이 되는 특징(예: 기능, 동작 또는 구성요소 등)이 존재함을 의미하며, 다른 추가적인 특징의 존재를 배제하지 않는다. 즉, 이와 같은 표현들은 다른 실시예를 포함할 가능성을 내포하는 개방형 용어(open-ended terms)로 이해되어야 한다.
본 문서에서 사용되는 단수형의 표현은, 문맥상 다르게 뜻하지 않는 한 복수형의 의미를 포함할 수 있으며, 이는 청구항에 기재된 단수형의 표현에도 마찬가지로 적용된다.
본 문서에서 사용되는 "제1", "제2", 또는 "첫째", "둘째" 등의 표현은, 문맥상 다르게 뜻하지 않는 한, 복수의 동종 대상들을 지칭함에 있어 한 대상을 다른 대상과 구분하기 위해 사용되며, 해당 대상들간의 순서 또는 중요도를 한정하는 것은 아니다.
본 문서에서 사용되는 "A, B, 및 C," "A, B, 또는 C," "A, B, 및/또는 C" 또는 "A, B, 및 C 중 적어도 하나," "A, B, 또는 C 중 적어도 하나," "A, B, 및/또는 C 중 적어도 하나," "A, B, 및 C 중에서 선택된 적어도 하나," "A, B, 또는 C 중에서 선택된 적어도 하나," "A, B, 및/또는 C 중에서 선택된 적어도 하나" 등의 표현은, 각각의 나열된 항목 또는 나열된 항목들의 가능한 모든 조합들을 의미할 수 있다. 예를 들어, "A 및 B 중에서 선택된 적어도 하나"는, (1) A, (2) A 중 적어도 하나, (3) B, (4) B 중 적어도 하나, (5) A 중 적어도 하나 및 B 중 적어도 하나, (6) A 중 적어도 하나 및 B, (7) B 중 적어도 하나 및 A, (8) A 및 B를 모두 지칭할 수 있다.
본 문서에서 사용되는 "~에 기초하여(based on 또는 according to)"라는 표현은, 해당 표현이 포함되는 어구 또는 문장에서 기술되는, 결정, 판단의 행위 또는 동작에 영향을 주는 하나 이상의 인자를 기술하는데 사용되고, 이 표현은 해당 결정, 판단의 행위 또는 동작에 영향을 주는 추가적인 인자를 배제하지 않는다.
본 문서에서 사용되는, 어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "연결되어" 있다거나 "접속되어" 있다는 표현은, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결 또는 접속되는 것뿐 아니라, 새로운 다른 구성요소(예: 제3 구성요소)를 매개로 하여 연결 또는 접속되는 것을 의미할 수 있다.
본 문서에서 사용된 표현 "~하도록 구성된(configured to)"은 문맥에 따라, "~하도록 설정된", "~하는 능력을 가지는", "~하도록 변경된", "~하도록 만들어진", "~를 할 수 있는" 등의 의미를 가질 수 있다. 해당 표현은, "하드웨어적으로 특별히 설계된"의 의미로 제한되지 않으며, 예를 들어 특정 동작을 수행하도록 구성된 프로세서란, 해당 특정 동작을 수행하도록, 프로그래밍을 통해 구조화된 특수 목적 컴퓨터(special purpose computer)를 의미할 수 있다.
본 개시의 다양한 실시예를 설명하기 위하여, 서로 직교하는 X축, Y축 및 Z축을 가지는 직교 좌표계가 정의될 수 있다. 본 문서에서 사용되는, 직교 좌표계의 "X축 방향", "Y축 방향", "Z축 방향" 등의 표현은, 해당 설명에서 특별히 다르게 정의되지 않는 한, 직교 좌표계의 각 축이 뻗어나가는 양쪽 방향을 의미할 수 있다. 또한, 각 축 방향의 앞에 붙는 +부호는, 해당 축 방향으로 뻗어나가는 양쪽 방향 중 어느 한 방향인 양의 방향을 의미할 수 있고, 각 축 방향의 앞에 붙는 -부호는, 해당 축 방향으로 뻗어나가는 양쪽 방향 중 나머지 한 방향인 음의 방향을 의미할 수 있다.
이하, 첨부된 도면들을 참조하여, 본 개시의 다양한 실시예들을 설명한다. 첨부된 도면 및 도면에 대한 설명에서, 동일하거나 실질적으로 동등한(substantially equivalent) 구성요소에는 동일한 참조부호가 부여될 수 있다. 또한, 이하 다양한 실시예들의 설명에 있어서, 동일하거나 대응하는 구성요소를 중복하여 기술하는 것이 생략될 수 있으나, 이는 해당 구성요소가 그 실시예에 포함되지 않는 것을 의미하지는 않는다.
도 1은 본 개시의 일 실시예에 따른 장치(100)의 동작 과정을 도시한 도면이다. 장치(100)는 스포츠 매치의 중계를 위한 영상을 결정할 수 있다. 본 개시에서 스포츠는 탁구, 테니스 등 본 개시에 따른 기술을 적용 가능한 다양한 스포츠를 포함할 수 있으며, 특정 스포츠로 제한되지 아니한다. 이하 편의를 위하여 탁구를 기초로 본 개시의 기술에 대해 설명한다.
장치(100)는 카메라 그룹(110) 및/또는 영상 송출 기기(170)와 통신할 수 있다. 장치(100)는 카메라 그룹(110)으로부터 해당 매치를 다양한 방식으로 촬영한 복수의 영상(130)을 획득할 수 있다. 장치(100)는 복수의 영상(130) 중 해당 매치를 중계하는 데에 사용될 중계 영상을 결정할 수 있다. 장치(100)는 결정된 영상을 영상 송출 기기(170)로 전송할 수 있다. 영상 송출 기기(170)는 장치(100)로부터 수신한 영상을 시청자들에게 송출하여 해당 매치에 대한 중계를 수행할 수 있다.
카메라 그룹(110)은 하나 이상의 카메라를 포함할 수 있다. 카메라 그룹(110)의 각 카메라는 스포츠 매치의 경기 공간(120)을 기준으로 다양한 위치에 배치되어, 다양한 대상을 다양한 화각으로 촬영할 수 있다. 따라서 카메라 그룹(110)은 스포츠 매치를 다양한 방식으로 촬영한 복수의 영상(130)을 생성할 수 있다. 본 개시에서 경기 공간(120)이란 해당 스포츠 매치가 실시되는 공간으로서, 예를 들어 탁구의 경우 길이 14m, 너비 7m, 높이 5m 이상의 직육면체형 공간을 의미할 수 있다. 각 카메라는 경기 공간(120)의 각 측면, 상측방 등의 위치에 배치될 수 있다. 한 카메라(112)는 경기 공간(120)의 일부 내지 전체를 촬영할 수 있다. 다른 카메라들(114)은 각각 매치 중인 선수들을 촬영할 수 있다. 다른 카메라들(116)은 매치에 사용 중인 공을 촬영하여, 공을 추적하기 위한 공 추적 정보(140)를 생성할 수 있다. 본 개시에서 공 추적 정보(140)는, 경기 공간(120) 내에서 시간에 따라 공이 가지는 3차원 위치를 지시하는 정보일 수 있다. 공 추적 정보(140)는 공을 추적하며 촬영한 영상이거나, 공의 시간별 위치를 지시하는 정보의 형태일 수 있다. 일 실시예에서, 카메라 그룹(110)의 한 카메라는 고속 카메라 영상을 촬영하는 고속 카메라일 수 있다. 고속 카메라는 조밀한 프레임 간격으로 대상을 연속 촬영하여, 촬영된 영상이 프레임 저하 없이 느린 속도로 재생될 수 있게 촬영하는 카메라일 수 있다. 고속 카메라는 공이나 선수를 촬영하여 고속 카메라 영상을 생성할 수 있다. 전술한 카메라 중 하나(예: 카메라(112), 카메라(114) 등)가 고속 카메라일 수도 있고, 별도의 고속 카메라가 구비될 수도 있다.
장치(100)는 카메라 그룹(110)으로부터 복수의 영상(130) 및 공 추적 정보(140)를 획득할 수 있다. 장치(100)는 공 추적 정보(140) 등에 기초하여, 복수의 영상(130) 중 매치의 중계에 사용될 영상을 결정할 수 있다. 일 실시예에서, 장치(100)는 공 추적 정보(140)에 기초하여, 해당 매치 내 랠리(rally)가 시작되었는지, 또는 랠리가 종료되었는지 여부를 결정할 수 있다.
장치(100)는 랠리가 시작되었다는 결정에 따라, 복수의 영상(130) 중에서 해당 매치가 진행되고 있는 경기 공간(120)을 촬영한 영상(이하, 제1 영상(150))을 현재 중계되어야 될 영상으로 결정하고, 제1 영상(150)을 영상 송출 기기(170)로 전송할 수 있다. 일 실시예에서, 제1 영상(150)은 경기 공간(120)의 일부 또는 전체를 촬영한 영상일 수 있다. 또한 장치(100)는 랠리가 종료되었다는 결정에 따라, 복수의 영상(130) 중에서 해당 랠리에서 득점한 선수를 촬영한 영상(이하, 제2 영상(160))을 현재 중계되어야 될 영상으로 결정하고, 제2 영상(160)을 영상 송출 기기(170)로 전송할 수 있다.
영상 송출 기기(170)는 장치(100)로부터 수신한 (예: 제1 영상(150), 제2 영상(160) 등)을 시청자들에게 송출하여 해당 매치에 대한 중계를 수행할 수 있다. 본 개시에서 영상 송출 기기(170)는 TV로 중계 영상을 실시간 송출하는 방송 장비이거나, 인터넷망을 통하여 각 단말(예: 스마트폰)로 중계 영상을 제공하거나 실시간 스트리밍하는 서버일 수 있다.
도 2는 본 개시의 일 실시예에 따른 장치(100)의 블록도를 나타낸 도면이다. 일 실시예에서, 장치(100)는 통신 회로(230), 하나 이상의 프로세서(210) 및/또는 하나 이상의 메모리(220)를 구성요소로서 포함할 수 있다. 일 실시예에서, 장치(100)의 구성요소들 중 적어도 하나가 생략되거나, 다른 구성요소가 장치(100)에 추가될 수 있다. 일 실시예에서, 추가적으로(additionally) 또는 대체적으로(alternatively), 일부의 구성요소들이 통합되어 구현되거나, 단수 또는 복수의 개체로 구현될 수 있다. 본 개시에서, 하나 이상의 프로세서(210)는 프로세서(210)라고 표현될 수 있다. 프로세서(210)라는 표현은, 문맥상 명백히 다르게 표현하지 않는 이상, 하나 또는 그 이상의 프로세서의 집합을 의미할 수 있다. 본 개시에서, 하나 이상의 메모리(220)는 메모리(220)라고 표현될 수 있다. 메모리(220)라는 표현은, 문맥상 명백히 다르게 표현하지 않는 이상, 하나 또는 그 이상의 메모리의 집합을 의미할 수 있다. 일 실시예에서, 장치(100) 내/외부의 구성요소들 중 적어도 일부의 구성요소들은 버스, GPIO(general purpose input/output), SPI(serial peripheral interface) 또는 MIPI(mobile industry processor interface) 등을 통해 서로 연결되어, 정보(데이터, 신호 등)를 주고 받을 수 있다.
통신 회로(230)는, 장치(100)와 카메라 그룹(110), 또는 장치(100)와 영상 송출 기기(170) 간의 무선 또는 유선 통신을 수행할 수 있다. 예를 들어, 통신 회로(230)는 eMBB(enhanced Mobile Broadband),　URLLC(Ultra Reliable Low-Latency Communications), MMTC(Massive Machine Type Communications), LTE(Long-Term Evolution), LTE-A(LTE Advance), NR(New Radio), UMTS(Universal Mobile Telecommunications System), GSM(Global System for Mobile communications), CDMA(Code Division Multiple Access), WCDMA(Wideband CDMA), WiBro(Wireless Broadband), WiFi(Wireless Fidelity), 블루투스(Bluetooth), NFC(Near Field Communication), GPS(Global Positioning System) 또는 GNSS(Global Navigation Satellite System) 등의 방식에 따른 무선 통신을 수행할 수 있다. 예를 들어, 통신 회로(230)는 USB(Universal Serial Bus), HDMI(High Definition Multimedia Interface), RS-232(Recommended Standard-232) 또는 POTS(Plain Old Telephone Service) 등의 방식에 따른 유선 통신을 수행할 수 있다.
프로세서(210)는 소프트웨어(예: 명령, 프로그램 등)를 구동하여 프로세서(210)에 연결된 장치(100)의 적어도 한 구성요소를 제어할 수 있다. 또한 프로세서(210)는 본 개시와 관련된 다양한 연산, 처리, 데이터 생성, 가공 등의 동작을 수행할 수 있다. 또한 프로세서(210)는 데이터 등을 메모리(220)로부터 로드하거나, 메모리(220)에 저장할 수 있다. 일 실시예에서, 프로세서(210)는 통신 회로(230)를 통하여, 카메라 그룹(110)으로부터 해당 매치에 사용되는 공을 추적하기 위한 공 추적 정보(140)를 획득하고, 공 추적 정보(140)에 기초하여, 매치 내 랠리의 시작 또는 종료를 결정하고, 랠리가 시작되었다는 결정에 따라, 통신 회로(230)를 제어하여, 복수의 영상(130) 중 제1 영상(150)을 영상 송출 기기(170)로 전송하고, 랠리가 종료되었다는 결정에 따라, 통신 회로(230)를 제어하여, 복수의 영상(130) 중 제2 영상을 영상 송출 기기로 전송할 수 있다.
메모리(220)는 다양한 데이터를 저장할 수 있다. 메모리(220)에 저장되는 데이터는, 장치(100)의 적어도 한 구성요소에 의해 획득되거나, 처리되거나, 사용되는 데이터로서, 소프트웨어(예: 명령, 프로그램 등)를 포함할 수 있다. 메모리(220)는 휘발성 및/또는 비휘발성 메모리를 포함할 수 있다. 본 개시에서, 명령 내지 프로그램은 메모리(220)에 저장되는 소프트웨어로서, 장치(100)의 리소스를 제어하기 위한 운영체제, 어플리케이션 및/또는 어플리케이션이 장치(100)의 리소스들을 활용할 수 있도록 다양한 기능을 어플리케이션에 제공하는 미들 웨어 등을 포함할 수 있다. 일 실시예에서, 메모리(220)는 프로세서(210)에 의한 실행 시 프로세서(210)가 연산을 수행하도록 하는 명령을 저장할 수 있다. 일 실시예에서, 메모리(220)는 복수의 영상(130), 공 추적 정보(140) 등 본 개시의 기술 구현에 필요한 다양한 정보들을 저장할 수 있다.
일 실시예에서, 장치(100)는 다양한 형태의 장치가 될 수 있다. 예를 들어, 장치(100)는 컴퓨터 장치, 서버, 휴대용 통신 장치, 전술한 장치들의 조합에 따른 장치, 또는 전술한 장치들 내의 칩, 보드, 회로 등일 수 있다. 다만 본 개시의 장치(100)는 전술한 장치들에 한정되지 않는다.
본 개시는, 카메라 그룹(110) 및 장치(100)를 포함하는 시스템을 제공할 수 있다. 또한 본 개시는 카메라 그룹(110), 장치(100) 및 영상 송출 기기(170)를 포함하는 시스템 역시 제공할 수 있다. 해당 시스템들 역시 본 개시의 범위 내에 포함된다.
도 3은 본 개시의 일 실시예에 따른 중계 영상의 결정 과정을 도시한 도면이다. 전술한 바와 같이, 장치(100)의 프로세서(210)는 복수의 영상(130) 중 스포츠 매치의 상황에 적합한 중계용 영상을 결정할 수 있다.
일 실시예에서, 프로세서(210)는 랠리의 시작 전, 해당 랠리가 시작될 준비가 되었는지 여부를 결정할 수 있다. 그리고 프로세서(210)는 랠리의 시작 준비 상태에 적합한 영상을 결정하고, 이를 영상 송출 기기로 전송할 수 있다. 구체적으로 프로세서(210)는 랠리의 시작 전, 통신 회로(230)를 통하여, 카메라 그룹(110)으로부터 선수의 움직임을 추적하기 위한 선수 움직임 정보를 획득할 수 있다. 본 개시에서, 선수 움직임 정보는 매치 중인 선수들의 움직임을 지시하는 정보일 수 있다. 예를 들어 선수 움직임 정보는 선수의 팔, 다리의 움직임 등을 촬영한 영상, 또는 팔, 다리의 시간별 위치, 자세를 기록한 정보일 수 있다. 카메라 그룹(110)은 선수를 촬영하여, 선수 움직임 정보를 생성할 수 있다.
프로세서(210)는 선수 움직임 정보에 기초하여, 랠리가 시작될 준비가 되었는지 여부를 결정할 수 있다. 일 실시예에서, 선수 중 하나가 서브 준비 동작을 취하는 경우, 프로세서(210)는 랠리가 시작될 준비가 되었다고 결정할 수 있다. 메모리(220)는 서브 준비 동작에 해당하는 움직임을 지시하는 정보를 미리 저장할 수 있다. 프로세서(210)는 서브 준비 동작에 해당하는 움직임을 지시하는 정보 및 선수 움직임 정보에 기초하여 랠리가 시작될 준비가 되었는지 여부를 결정할 수 있다.
일 실시예에서, 각 선수가 랠리를 위한 지정 위치(예: 탁구대 기준 특정 엔드 라인 뒤편)에 위치하는 경우, 프로세서(210)는 랠리가 시작될 준비가 되었다고 결정할 수도 있다. 메모리(220)는 매치의 득점 상황 및 직전 랠리에서 각 선수의 지정 위치를 지시하는 정보를 저장할 수 있다. 프로세서(210)는 해당 정보에 기초하여 각 선수가 경기 공간(120) 중 어느 곳에 위치해야 하는지를 결정할 수 있다. 프로세서(210)는 선수 움직임 정보에 기초하여 각 선수가 랠리를 위한 지정 위치에 위치하는 경우, 랠리가 시작될 준비가 되었다고 결정할 수 있다. 일 실시예에서, 랠리가 시작될 준비가 되었음을 지시하는 신호를 외부로부터 수신함에 따라, 프로세서(210)는 랠리가 시작될 준비가 되었다고 결정할 수도 있다.
일 실시예에서, 프로세서(210)는 통신 회로(230)를 통해 카메라 그룹(110)으로부터 심판 움직임 정보를 획득할 수 있다. 심판 움직임 정보는 심판의 움직임을 지시하는 정보일 수 있다. 예를 들어 심판 움직임 정보는 심판의 팔, 다리의 움직임 등을 촬영한 영상 또는 팔, 다리의 시간별 위치, 자세를 기록한 정보일 수 있다. 카메라 그룹(110)은 심판을 촬영하여, 심판 움직임 정보를 생성할 수 있다. 프로세서(210)는 선수 움직임 정보 및/또는 심판 움직임 정보에 기초하여, 랠리가 시작될 준비가 되었는지 여부를 결정할 수 있다. 예를 들어 심판이 특정 동작, 수신호 등을 하는 경우, 랠리가 시작될 준비가 되었다고 결정될 수 있다.
랠리가 시작될 준비가 되었다는 결정에 따라, 프로세서(210)는 통신 회로(230)를 제어하여, 복수의 영상(130) 중 해당 랠리에서 서브권을 가진 선수를 촬영한 영상(이하, 제3 영상(320))을 현재 중계되어야 될 영상으로 결정할 수 있다. 프로세서(210)는 해당 제3 영상(320)을 영상 송출 기기(170)로 전송할 수 있다. 이에 따라 영상 송출 기기(170)는 이전에 송출되고 있던 영상(예: 경기 공간을 촬영한 영상(310) 등)의 송출을 중단하고, 제3 영상(320)의 송출을 시작할 수 있다.
이후 전술한 바와 같이, 프로세서(210)는 해당 랠리의 시작 또는 종료를 결정하고, 그에 적합한 영상을 영상 송출 기기로 전송하여 시청자들에게 송출되도록 할 수 있다. 즉, 프로세서(210)는 제3 영상(320)을 전송한 이후, 공 추적 정보(140)에 기초하여 랠리가 시작되었는지 여부를 결정할 수 있다. 랠리가 시작되었다는 결정에 따라, 프로세서(210)는 경기 공간(120)을 촬영한 제1 영상(150)을 영상 송출 기기(170)로 전송할 수 있다. 이에 따라 영상 송출 기기(170)는 이전에 송출되고 있던 제3 영상(320)의 송출을 중단하고, 제1 영상(150)의 송출을 시작할 수 있다.
또한 프로세서(210)는 제1 영상(150)을 전송한 이후, 공 추적 정보(140)에 기초하여 랠리가 종료되었는지 여부를 결정할 수 있다. 랠리가 종료되었다는 결정에 따라, 프로세서(210)는 해당 랠리에서 득점한 선수를 촬영한 제2 영상(160)을 영상 송출 기기(170)로 전송할 수 있다. 이에 따라 영상 송출 기기(170)는 이전에 송출되고 있던 제1 영상(150)의 송출을 중단하고, 제2 영상(160)의 송출을 시작할 수 있다.
도 4는 본 개시의 일 실시예에 따른 스포츠 매치의 시합 표면(400)을 도시한 도면이다. 시합 표면(400)은 경기 공간(120) 중 득실점에 관계된 각종 판단의 기준이 되는 영역으로서, 시합 표면(400)은 센터 라인을 기준으로 제1 코트(410)와 제2 코트(420)로 나뉘어질 수 있다. 예를 들어 탁구의 경우 시합 표면(400)은 탁구대의 윗면일 수 있고, 테니스의 경우 시합 표면은 소정의 규격에 따른 테니스 코트일 수 있다. 전술한 바와 같이, 설명의 편의를 위하여 탁구를 기준으로 설명한다.
장치(100)의 프로세서(210)는 공 추적 정보(140)에 기초하여, 다양한 방식으로 랠리의 시작 여부를 결정할 수 있다. 일 실시예에서, 프로세서(210)는 랠리의 시작 준비 상태에서, 공이 시합 표면(400)에 접촉했는지 여부에 기초하여 랠리가 시작되었음을 결정할 수 있다. 프로세서(210)는 공 추적 정보(140)에 기초하여 공이 시합 표면(400)에 접촉했는지 여부를 결정할 수 있다. 예를 들어 프로세서(210)는 공의 z축 상 위치를 시합 표면(400)의 위치 정보와 비교하여, 공이 시합 표면(400)에 접촉하였는지 여부를 결정할 수 있다. 메모리(220)는 시합 표면(400)의 위치 정보를 미리 저장할 수 있다.
일 실시예에서, 프로세서(210)는 공이 수직 상방으로 미리 설정된 거리 이상 이동하였는지 여부에 기초하여, 랠리가 시작되었음을 결정할 수 있다. 예를 들어 공이 서브하는 선수의 손을 떠나 16cm 이상 실질적으로(substantially) 수직 상방으로 이동한 경우, 프로세서(210)는 랠리가 시작되었다고 결정할 수 있다. 일 실시예에서, 랠리의 시작 준비 상태에서, 공이 수직 상방으로 미리 설정된 거리 이상 이동하였을 때, 랠리가 시작되었다고 결정할 수도 있다. 일 실시예에서, 프로세서(210)는 공이 수직 상방으로 미리 설정된 거리 이상 이동한 후, 미리 설정된 시간 간격(예: 3초) 내에 시합 표면(400)에 접촉하였는지 여부에 기초하여, 랠리가 시작되었음을 결정할 수도 있다.
도 5는 본 개시의 일 실시예에 따른 랠리의 계속 및 종료를 도시한 도면이다. 전술한 바와 같이, 장치(100)의 프로세서(210)는 랠리의 종료를 결정할 수 있다. 일 실시예에서, 프로세서(210)는 시합 표면(400)을 지시하는 정보(이하, 시합 표면 정보) 및 공 추적 정보(140)에 기초하여, 랠리가 종료되었는지 여부를 결정할 수 있다. 본 개시에서, 시합 표면 정보는 시합 표면(400)에 대한 정보를 포함할 수 있다. 시합 표면 정보는 경기 공간(120) 내에서 시합 표면(400)의 위치를 지시하는 정보를 포함할 수 있다. 또한 시합 표면 정보는 시합 표면(400) 상의 양 코트(410, 420)가 차지하는 영역, 센터 라인, 엔드 라인 및 사이드 라인의 위치, 네트의 높이와 위치 등을 지시할 수 있다.
랠리 중, 공은 시합 표면(400)의 두 코트 중 한 코트(예: 제1 코트(410))에 접촉할 수 있다(510). 프로세서(210)는 시합 표면 정보 및 공 추적 정보(140)에 기초하여 이를 판단할 수 있다. 이후 프로세서(210)는 시합 표면 정보 및 공 추적 정보(140)에 기초하여, 공이 미리 설정된 제1 시간 간격(예: 3초) 내에 두 코트 중 다른 한 코트(예: 제2 코트(420))에 접촉하였는지 여부를 결정할 수 있다(512). 공이 한 코트에 접촉한 후 제1 시간 간격 내에 다른 한 코트에 접촉하였다는 결정에 따라, 프로세서(210)는 해당 랠리가 종료되지 않았고, 계속 중이라고 결정할 수 있다.
반면 공이 한 코트(예: 제1 코트(410))에 접촉한 후 제1 시간 간격 내에 다른 한 코트(예: 제2 코트(420))에 접촉하지 못하였다는 결정에 따라, 프로세서(210)는 해당 랠리가 종료되었다고 결정할 수 있다. 예를 들어 공이 제1 코트(410)에 접촉하고 다시 제1 코트(410)에 접촉하거나(522), 제1 코트(410)에 접촉한 후 시합 표면(400)을 벗어난 경우(524) 등, 제1 코트(410)에 접촉한 후 제1 시간 간격 내에 제2 코트(420)에 접촉하지 못한다면, 프로세서(210)는 해당 랠리가 종료되었다고 결정할 수 있다.
일 실시예에서, 프로세서(210)는 공의 속력에 기초하여, 랠리의 종료를 결정할 수도 있다. 프로세서(210)는 공 추적 정보(140)에 기초하여 공의 속력을 결정할 수 있다. 공의 속력이 미리 설정된 제2 시간 간격 이상 일정량 이하를 유지하는 경우(예: 7초 이상 0.2m/s 이하의 속력을 유지), 프로세서(210)는 해당 랠리가 종료되었다고 결정할 수 있다. 예를 들어 공이 시합 표면(400)이나 경기 공간(120) 내에서 일정 시간 이상 정지해 있거나, 일정 속력 이하의 속력으로 움직일 때, 랠리가 종료되었다고 결정될 수 있다(526).
일 실시예에서, 프로세서(210)는 공의 추적을 실패하고 일정 시간 동안 다시 공을 추적하지 못하는 경우에, 랠리가 종료되었다고 결정할 수도 있다. 프로세서(210)는 카메라 그룹(110)으로부터 공 추적 정보(140)를 획득할 수 있다. 카메라 그룹(110)이 공의 위치를 추적하지 못한 경우, 예를 들어 공이 선수나 탁구대 등에 의해 가려지거나, 공이 경기 공간(120)을 벗어난 경우, 공 추적 정보(140)에서 그 시간 동안 공의 위치에 대한 정보가 누락될 수 있다. 프로세서(210)는 공 추적에 실패한 시간 동안의 정보가 누락된 해당 공 추적 정보(140)를 획득하고, 공 추적에 실패한 시간이 일정 시간(예: 30초) 이상인지 여부를 결정하고, 일정 시간 동안 공 추적에 실패한 경우 해당 랠리가 종료되었다고 결정할 수 있다.
랠리가 종료되었다는 결정에 따라, 프로세서(210)는 해당 매치의 득점 상황을 갱신할 수 있다. 프로세서(210)는 시합 표면 정보 및 공 추적 정보(140)에 기초하여, 해당 랠리에서 득점이 있었는지, 그리고 득점한 선수는 누구인지를 결정할 수 있다. 전술한 바와 같이, 시합 표면 정보는 시합 표면(400) 내에 양 코트가 차지하는 영역을 지시하는 정보를 포함할 수 있다. 프로세서(210)는 이러한 시합 표면 정보 및 공 추적 정보(140)에 기초하여, 랠리가 종료되기 전 공이 어떠한 궤적을 보였는지를 판단하고, 이에 따라 득점 여부와 득점한 선수를 결정할 수 있다. 일 실시예에서, 프로세서(210)는 랠리가 종료되기 전부터 역순으로 시합 표면(400)에 접촉한 최근 두 번의 경우(instance)에 있어서, 공이 어느 코트(410, 420)에 접촉하였는지에 기초하여, 득점 여부와 득점한 선수를 결정할 수 있다. 예를 들어 공이 제1 코트(410)에 접촉한 후 연이어 제1 코트(410)에 접촉한 경우, 제2 코트(420) 측 엔드(end)에 위치한 선수가 득점한 것으로 결정될 수 있다. 공이 제1 코트(410)에 접촉하고 연이어 제2 코트(420)에 접촉한 후 공이 일정 속력 이하로 움직이거나 공의 추적에 실패한 경우, 제1 코트(410) 측 엔드에 위치한 선수가 득점한 것으로 결정될 수 있다.
일 실시예에서, 프로세서(210)는 선수 움직임 정보에 추가로 기초하여, 해당 랠리에서 득점이 있었는지, 그리고 득점한 선수는 누구인지를 결정할 수 있다. 제1 코트(410) 측 선수가 리시브 동작을 한 직후 공이 제1 코트(410)에 접촉한 경우, 제2 코트(420) 측 선수가 득점한 것으로 결정될 수 있다. 제1 코트(410) 측 선수가 서브 동작을 한 직후 공이 제2 코트(420)에 바로 접촉한 경우, 제2 코트(420) 측 선수가 득점한 것으로 결정될 수 있다. 또는 제1 코트(410) 측 선수가 서브나 리시브 동작을 한 직후 공이 일정 속력 이하로 움직이거나 공의 추적에 실패한 경우, 제2 코트(420) 측 선수가 득점한 것으로 결정될 수 있다.
해당 랠리에서의 득점 여부와 득점한 선수가 결정되면, 프로세서(210)는 이에 기초하여, 해당 스포츠 매치의 득점 상황을 지시하는 정보(이하, 득점 상황 정보)를 갱신할 수 있다. 즉 프로세서(210)는, 득점한 선수에 해당하는 스코어를 증가시킬 수 있다. 또한 해당 랠리에서의 득점 여부와 득점한 선수가 결정되면, 프로세서(210)는 선수들 각각을 촬영한 영상들 중 하나를 해당 랠리에서 득점한 선수를 촬영한 제2 영상(160)으로 결정할 수 있다. 이후 프로세서(210)는 제2 영상(160)을 현재 중계되어야 될 영상으로 결정하고, 제2 영상(160)을 영상 송출 기기(170)로 전송할 수 있다.
도 6은 본 개시의 일 실시예에 따른, 랠리의 종료가 결정됨에 따라 중계될 영상을 결정하는 과정을 도시한 도면이다. 전술한 바와 같이, 랠리가 종료되었다는 결정에 따라, 프로세서(210)는 복수의 영상(130) 중 해당 랠리에서 득점한 선수를 촬영한 제2 영상(160)을 현재 중계되어야 될 영상으로 결정하고, 제2 영상(160)을 영상 송출 기기(170)로 전송할 수 있다. 일 실시예에서, 프로세서(210)는 제2 영상(160)을 전송하고 일정 시간(예: 5초)이 지난 후, 중계될 다른 영상을 결정해, 이를 영상 송출 기기(170)로 추가로 전송할 수 있다.
일 실시예(610)에서, 프로세서(210)는 종료된 랠리의 다음 랠리에서 서브권을 가진 선수를 촬영한 영상(이하, 제4 영상(640))을 영상 송출 기기(170)에 추가로 전송할 수 있다. 메모리(220)는 종료된 랠리에서 서브권을 가지고 있던 선수를 지시하는 정보 및 랠리의 종료에 따라 갱신된 득점 상황 정보를 저장할 수 있다. 프로세서(210)는 종료된 랠리에서 서브권을 가지고 있던 선수를 지시하는 정보 및 랠리의 종료에 따라 갱신된 득점 상황 정보에 기초하여, 종료된 랠리의 다음 랠리에서 서브권을 가진 선수를 결정할 수 있다. 예를 들어 2 포인트를 득점할 때마다, 또는 득점 상황이 10:10인 경우 매 포인트를 득점할 때마다, 서브권이 다른 선수 또는 팀으로 변경되어야 할 수 있다. 득점 상황 상 서브하는 선수가 변경되어야 할 경우, 프로세서(210)는 종료된 랠리에서 서브권을 가진 선수가 아닌 반대 팀 선수를 다음 랠리에서 서브권을 가진 선수로 결정할 수 있다. 득점 상황 상 서브하는 선수가 변경되지 않아야 할 경우, 프로세서(210)는 종료된 랠리에서 서브권을 가진 선수를 다음 랠리에서도 서브권을 가진 선수로 결정할 수 있다.
다음 랠리에서 서브권을 가진 선수가 결정됨에 따라, 프로세서(210)는 복수의 영상(130) 중 다음 랠리에서 서브권을 가진 선수를 촬영한 제4 영상(640)을 결정할 수 있다. 프로세서(210)는 제2 영상(160)을 전송한 이후, 통신 회로(230)를 제어하여, 제4 영상(640)을 영상 송출 기기(170)로 전송할 수 있다. 일 실시예에서, 제2 영상(160)을 전송하고 일정 시간(예: 5초)이 지난 후, 제4 영상(640)을 영상 송출 기기(170)로 전송할 수 있다. 이에 따라 영상 송출 기기(170)는 이전에 송출되고 있던 제2 영상(160)의 송출을 중단하고, 제4 영상(640)의 송출을 시작할 수 있다.
일 실시예(620, 630)에서, 프로세서(210)는 종료된 랠리 내에서 공이 양 코트 사이를 왕복한 횟수에 기초하여, 제2 영상(160) 이후 영상 송출 기기(170)에 추가로 전송할 영상을 결정할 수 있다. 구체적으로, 프로세서(210)는 공 추적 정보(140)에 기초하여, 종료된 랠리 내에서 공이 양 코트 사이를 왕복한 횟수를 결정할 수 있다. 프로세서(210)는 결정된 왕복 횟수와 미리 설정된 기준 횟수들과 비교를 수행할 수 있다.
왕복한 횟수가 미리 설정된 제1 횟수(예: 10회) 이상이라는 결정에 따라, 프로세서(210)는 종료된 랠리에 대한 리플레이 영상(650)을 영상 송출 기기(170)로 전송할 수 있다. 예를 들어 프로세서(210)는 제2 영상(160)을 전송한 후, 통신 회로(230)를 제어하여, 리플레이 영상(650)과 제4 영상(640)을 두고 순차적으로 영상 송출 기기(170)로 전송할 수 있다(620). 일 실시예에서, 제2 영상(160)을 전송하고 일정 시간(예: 5초)이 지난 후, 리플레이 영상(650)과 제4 영상(640)을 각각 일정 시간 간격을 두고 순차적으로 영상 송출 기기(170)로 전송할 수 있다. 이에 따라 영상 송출 기기(170)는 이전에 송출되고 있던 제2 영상(160)의 송출을 중단하고, 리플레이 영상(650)을 송출한 뒤, 다시 일정 시간이 지난 후 제4 영상(640)을 송출할 수 있다.
왕복한 횟수가 미리 설정된 제2 횟수(예: 1회) 이하라는 결정에 따라, 프로세서(210)는 종료된 랠리에 대한 고속 카메라 영상(660)을 영상 송출 기기(170)로 전송할 수 있다. 제2 횟수는 제1 횟수보다 작은 수일 수 있다. 예를 들어 서브에 의해 득점이 발생한 경우(서브 포인트, 왕복 횟수 0회), 고속 카메라 영상(660)이 중계에 활용될 수 있다. 프로세서(210)는 제2 영상(160)을 전송한 후, 통신 회로(230)를 제어하여, 고속 카메라 영상(660)과 제4 영상(640)을 순차적으로 영상 송출 기기(170)로 전송할 수 있다(630). 일 실시예에서, 제2 영상(160)을 전송하고 일정 시간(예: 5초)이 지난 후, 고속 카메라 영상(660)과 제4 영상(640)을 각각 일정 시간 간격을 두고 순차적으로 영상 송출 기기(170)로 전송할 수 있다. 이에 따라 영상 송출 기기(170)는 이전에 송출되고 있던 제2 영상(160)의 송출을 중단하고, 고속 카메라 영상(660)을 송출한 뒤, 다시 일정 시간이 지난 후 제4 영상(640)을 송출할 수 있다.
일 실시예에서, 고속 카메라 영상(660)은 종료된 랠리 중 일부에 대한 고속 카메라 영상일 수 있다. 일 실시예에서, 종료된 랠리의 랠리 시작 시점부터 랠리 종료 시점까지를 고속 카메라로 촬영한 영상이 고속 카메라 영상(660)으로 결정될 수 있다. 일 실시예에서, 종료된 랠리 중 공이 네트, 엔드 라인 또는 사이드 라인에 일정 거리 내로 근접했던 시점, 공의 순간 속력이 일정 값 이상이었던 시점, 선수의 경기 공간(120) 내 위치의 변화량 또는 선수의 움직임의 변화량이 일정값 이상이었던 시점 등을 기준으로, 일정 시간 간격(예: 10초)에 대해 고속 카메라로 촬영한 영상이, 고속 카메라 영상(660)으로 결정될 수도 있다. 프로세서(210)는 공 추적 정보(140) 및 선수 움직임 정보 등에 기초하여 고속 카메라 영상(660)을 생성할 수 있다.
일 실시예에서, 프로세서(210)는 제2 영상(160), 리플레이 영상(650), 고속 카메라 영상(660) 및 제4 영상(640) 중에서 선택된 적어도 두 영상을, 소정의 순서에 따라, 순차적으로 영상 송출 기기(170)로 전송할 수도 있다.
도 7은 본 개시의 일 실시예에 따른 리플레이 영상(650)의 생성 과정을 도시한 도면이다. 프로세서(210)는 다양한 방식으로 랠리에 대한 리플레이 영상(650)을 생성할 수 있다.
일 실시예에서, 프로세서(210)는 랠리가 시작된 것으로 결정한 시점부터 해당 랠리가 종료된 것으로 결정한 시점까지의 시간 간격을 결정할 수 있다. 랠리의 시작 및 종료의 결정 방식은 전술한 바와 같다. 프로세서(210)는 해당 시간 간격에 해당하는 복수의 영상(130) 중 한 영상을 리플레이 영상(650)으로 결정할 수 있다. 예를 들어 프로세서(210)는 복수의 영상(130) 중 경기 공간(120) 전체를 촬영한 영상으로부터, 랠리의 시작부터 종료까지의 영상 부분을 추출한 후, 추출된 부분을 리플레이 영상(650)으로 결정할 수 있다.
일 실시예에서, 프로세서(210)는 스포츠 매치 중 다양한 이벤트의 발생을 감지하고, 해당 이벤트의 발생에 따라 리플레이 영상(650)을 생성할 수도 있다. 프로세서(210)는 카메라 그룹(110)으로부터의 복수의 영상(130), 공 추적 정보(140), 선수 움직임 정보 및 심판 움직임 정보 등에 기초하여, 매치 내 특정 이벤트들이 발생되었음을 결정할 수 있다. 프로세서(210)는 특정 이벤트가 발생한 시점부터, 다른 특정 이벤트가 발생한 시점까지의 시간 간격을 결정하고, 해당 시간 간격에 해당하는 복수의 영상(130) 중 한 영상을 리플레이 영상(650)으로 결정할 수 있다.
일 실시예에서, 프로세서(210)는 특정한 한 이벤트(이하, 1차 이벤트)가 발생한 시점부터의 영상을 따로 저장하기 시작하여, 특정한 다른 두 이벤트(이하, 2차 이벤트, 3차 이벤트)가 순차적으로 발생했음이 감지되면, 1차 이벤트부터 3차 이벤트까지의 영상을 리플레이 영상(650)으로 결정할 수도 있다.
구체적으로, 프로세서(210)는 복수의 영상(130), 공 추적 정보(140), 선수 움직임 정보 및 심판 움직임 정보 등에 기초하여, 해당 매치에 대한 분석을 수행할 수 있다(710). 프로세서(210)는 분석 과정에 따라, 매치 중 1차 이벤트가 발생했다고 결정할 수 있다(720). 만약 1차 이벤트가 발생하지 않은 경우, 매치에 대한 분석 과정을 계속 수행한다. 1차 이벤트는, 예를 들어 "랠리의 시작"일 수 있다. 랠리의 시작을 결정하는 방법은 전술한 바와 같다. 프로세서(210)는 복수의 영상(130) 중 한 영상을 선택할 수 있다(예: 경기 공간 전체를 촬영한 영상). 프로세서(210)는 선택된 영상에 대해, 1차 이벤트의 발생 시점 이후의 영상을 별도로 저장하기 시작할 수 있다(730). 1차 이벤트 검출 및 영상 저장과 병행하여, 프로세서(210)는 매치의 분석 과정을 계속해서 수행할 수 있다.
프로세서(210)는 분석 과정에 따라, 1차 이벤트 이후에 2차 이벤트가 발생했다고 결정할 수 있다(740). 만약 2차 이벤트가 발생하지 않은 경우, 매치에 대한 분석 과정을 계속 수행한다. 2차 이벤트는, 예를 들어 "랠리 내 공이 양 코트 사이를 왕복한 횟수가 제1 횟수에 도달"일 수 있다. 왕복 횟수는 전술한 바와 같이, 공 추적 정보(140) 등에 기초하여 결정될 수 있다. 프로세서(210)는 1차 이벤트 검출 이후 저장하고 있던 영상의 저장을 계속해서 수행할 수 있다. 또한 프로세서(210)는 매치의 분석 과정을 계속해서 수행할 수 있다.
프로세서(210)는 분석 과정에 따라, 2차 이벤트 이후에 3차 이벤트가 발생했다고 결정할 수 있다(750). 만약 3차 이벤트가 발생하지 않은 경우, 매치에 대한 분석 과정을 계속 수행한다. 3차 이벤트는, 예를 들어 "랠리의 종료"일 수 있다. 랠리의 종료를 결정하는 방법은 전술한 바와 같다. 프로세서(210)는 앞서 선택한 영상 중, 1차 이벤트 발생부터 3차 이벤트 발생까지의 시간 간격에 해당하는 부분 영상을 추출하여, 리플레이 영상(650)으로 결정할 수 있다(760). 프로세서(210)는 전술한 바와 같이, 리플레이 영상(650)을 영상 송출 기기(170)로 전송할 수 있다.
일 실시예에서, 1차 이벤트 발생 후부터 미리 설정된 시간 간격 이상 2차 이벤트 발생이 감지되지 않는 경우, 또는 2차 이벤트 발생 후부터 미리 설정된 시간 간격 이상 3차 이벤트 발생이 감지되지 않는 경우, 진행 중인 리플레이 영상의 생성 과정을 중단하고, 리플레이 영상 생성 과정을 처음부터 다시 시작할 수 있다(710).
일 실시예에서, 1차 이벤트 내지 3차 이벤트 각각은 다양한 이벤트로 설정될 수 있다. 예를 들어 "공이 네트, 엔드 라인 또는 사이드 라인에 일정 거리 내로 근접", "공의 순간 속력이 일정 값 이상에 도달", "선수의 경기 공간(120) 내 위치의 변화량 또는 선수의 움직임의 변화량이 일정값 이상에 도달", "공이 서브 후 한 코트에서 다른 코트로 이동" 등이 2차 이벤트로 설정될 수 있다.
일 실시예에서, 경기 공간(120) 내 특정 영역을 탐색 영역으로 설정하고, 해당 탐색 영역 내 공 또는 선수의 움직임을 기초로 하여, 이벤트의 발생을 결정할 수도 있다. 예를 들어, 센터 라인을 관통하는 가상의 면을 상정해 탐색 영역으로 설정하고, 공이 해당 탐색 영역을 통과하는 것을 2차 이벤트로 설정할 수 있다. 프로세서(210)는 탐색 영역 및 공 추적 정보(140)에 기초하여, 해당 2차 이벤트를 결정할 수 있다. 예를 들어 야구의 경우, 투수 마운드의 일정 부분을 탐색 영역으로 설정하고, 탐색 영역 및 투수의 움직임 정보에 기초하여 투수가 야구공을 던진 것으로 판단되면, 이를 1차 이벤트로 결정할 수 있다. "타자가 투수가 던진 야구공을 타격" 또는 "전광판을 촬영한 영상으로부터 볼 또는 스트라이크가 발생했음을 감지"한 경우를 2차 이벤트로 결정할 수 있다. 또한 "전광판을 촬영한 영상으로부터 아웃 카운트가 변화하였거나 득점이 발생했음을 감지"한 경우를 3차 이벤트로 결정할 수 있다.
일 실시예에서, 프로세서(210)는 전술한 방법으로 특정한 영상들에 느린 재생(예: 0.8배속 재생) 처리를 수행하여, 리플레이 영상(650)을 생성할 수 있다. 일 실시예에서, 프로세서(210)는 리플레이 영상(650)의 일 영역(예: 영상의 우하단)에 PIP(Picture-In-Picture)의 형태로 해당 매치의 실시간 영상(예: 경기 공간 전체를 촬영한 영상)을 포함시킬 수도 있다.
도 8은 본 개시의 일 실시예에 따른 랠리 분석 영상을 도시한 도면이다. 랠리 분석 영상은 해당 랠리에 대한 분석 정보를 포함할 수 있다. 랠리에 대한 분석 정보는, 해당 랠리에서 공이 시합 표면(400)에 접촉한 위치를 시계열적으로 지시하는 정보를 포함할 수 있다. 도시된 실시예에 따른 랠리 분석 영상은, 랠리 중 공이 시합 표면(400)의 각 코트 상 어느 지점에 접촉되었는지를, 접촉된 순서대로 표시한다. 실시예에 따라, 공이 접촉된 각 시점이 표시될 수도 있다.
프로세서(210)는 복수의 영상(130), 공 추적 정보(140), 선수 움직임 정보 및 심판 움직임 정보 등에 기초하여, 랠리에 대한 분석 정보를 생성할 수 있다. 프로세서(210)는 다양한 상황에 있어, 랠리에 대한 분석 정보를 기초로 랠리 분석 영상을 생성할 수 있다. 프로세서(210)는 생성된 랠리 분석 영상을 영상 송출 기기(170)로 전송하여 중계되도록 할 수 있다. 일 실시예에서, 프로세서(210)는 랠리 분석 영상을 생성할 것을 지시하는 입력을 수신함에 따라, 랠리에 대한 분석 정보에 기초하여 랠리 분석 영상을 생성할 수 있다.
일 실시예에서, 프로세서(210)는 종료된 랠리 내에서 공이 양 코트 사이를 왕복한 횟수가 미리 설정된 횟수 이상인 경우, 랠리에 대한 분석 정보에 기초하여 랠리 분석 영상을 생성할 수 있다. 일 실시예에서, 프로세서(210)는 다음 랠리의 시작이 일정 시간 이상 지연되는 경우, 랠리에 대한 분석 정보에 기초하여 랠리 분석 영상을 생성할 수 있다. 일 실시예에서, 프로세서(210)는 랠리의 종료에 따라 갱신된 득점 상황 정보에 기초하여, 매치 중 휴식 시간인지 여부를 결정하고, 휴식 시간에 해당한다는 결정에 따라, 휴식 시간 이전의 랠리에 대한 분석 정보에 기초하여 랠리 분석 영상을 생성할 수 있다. 예를 들어 양 선수 내지 양 팀의 점수 합계가 6의 배수가 되어 타월링(땀 닦는 시간)이 주어지는 경우, 랠리 분석 영상이 생성되어 영상 송출 기기(170)로 전송될 수 있다.
일 실시예에서, 프로세서(210)는 랠리 중 드라이브 경합이 발생한 경우에, 해당 랠리에 대한 분석 정보를 포함하는 랠리 분석 영상을 생성할 수도 있다. 프로세서(210)는 공 추적 정보(140)에 기초하여 랠리 중 드라이브 경합이 발생했는지 여부를 결정할 수 있다. 구체적으로, 프로세서(210)는 공 추적 정보(140)에 기초하여, 랠리 내 공의 수평 방향 속력의 평균값을 결정할 수 있다. 프로세서(210)는 해당 평균값을 미리 설정된 값과 비교할 수 있다. 해당 평균값이 미리 설정된 값 이상이라는 결정에 따라, 프로세서(210)는 해당 랠리에 대한 분석 정보를 포함하는 랠리 분석 영상을 생성할 수 있다. 일 실시예에서, 프로세서(210)는 제4 영상(640)을 전송하기 이전에, 통신 회로(230)를 제어하여 해당 랠리 분석 영상을 영상 송출 기기(170)로 전송할 수 있다. 예를 들어, 랠리 분석 영상은 리플레이 영상(650)의 전송 전이나 후, 고속 카메라 영상(660)의 전송 전이나 후에 영상 송출 기기(170)로 전송될 수 있다. 일 실시예에서, 프로세서(210)는 고속 카메라 영상(660)의 일 영역(예: 영상의 우하단)에 PIP 형태로 해당 매치의 실시간 영상(예: 경기 공간 전체를 촬영한 영상)을 포함시킬 수도 있다.
도 9는 본 개시의 일 실시예에 따른 게임(game) 분석 영상을 도시한 도면이다. 매치는 홀수개의 게임으로 이루어질 수 있다. 예를 들어 하나의 탁구 매치는 최대 7개의 게임이 이루어지는 7전 4선승제로 시행될 수 있다. 각 게임에서는 11점을 먼저 획득하는 선수 또는 팀이 승리할 수 있다. 게임 분석 영상은 해당 게임에 대한 분석 정보를 포함할 수 있다. 게임에 대한 분석 정보는, 해당 게임 내 선수(또는 팀)별 서브 방향, 서브 성공률, 공격 방향(공격 성공 시 공이 시합 표면 상에 접촉한 위치) 및 공격 성공률 중에서 선택된 적어도 하나의 정보를 포함할 수 있다. 일 실시예에서, 게임에 대한 분석 정보는 해당 게임 내 특정 선수가 친 공의 평균 속력 정보를 더 포함할 수 있다. 도시된 실시예에 따른 게임 분석 영상은, 3번째 게임에서 2번 선수의 공격 방향이 상단인 경우가 39.3%, 중단인 경우가 46.4%, 하단인 경우가 14.3%임이 표시된다. 또한 2번 선수가 친 공의 평균 속력이 17.4km/h임이 표시된다.
프로세서(210)는 복수의 영상(130), 공 추적 정보(140), 선수 움직임 정보 및 심판 움직임 정보 등에 기초하여, 게임에 대한 분석 정보를 생성할 수 있다. 일 실시예에서, 프로세서(210)는 득점 상황 상 한 게임이 종료되었다고 판단되는 경우, 게임에 대한 분석 정보에 기초하여 게임 분석 영상을 생성할 수 있다. 구체적으로, 프로세서(210)는 랠리의 종료에 따라 갱신된 득점 상황 정보에 기초하여, 해당 랠리가 포함된 게임이 종료되었는지 여부를 결정할 수 있다(예: 한 선수가 11점에 도달한 경우 등). 게임이 종료되었다는 결정에 따라, 프로세서(210)는 해당 게임에 대한 분석 정보를 포함하는 게임 분석 영상을 생성할 수 있다. 일 실시예에서, 프로세서(210)는 게임 분석 영상을 생성할 것을 지시하는 입력을 수신함에 따라, 게임에 대한 분석 정보에 기초하여 게임 분석 영상을 생성할 수도 있다. 게임 분석 영상이 생성되면, 프로세서(210)는 통신 회로(230)를 제어하여, 게임 분석 영상을 영상 송출 기기(170)로 전송할 수 있다. 이에 따라 해당 게임 분석 영상이 중계될 수 있다.
도 10은 본 개시의 일 실시예에 따른 VAR(Video Assistant Referee) 영상을 도시한 도면이다. VAR 영상은 스포츠 매치에서 판정이 애매한 경우에 있어, 심판의 판단을 보조하기 위한 정보를 제공하기 위한 영상일 수 있다. VAR 영상은 공의 라인 인/아웃(in/out), 공이 탁구채에 접촉하였는지 여부, 기타 득실점에 관련된 각종 판단을 보조하기 위한 정보를 제공할 수 있다. 도시된 실시예에 따른 VAR 영상은, 랠리 중 공의 궤적을 컴퓨터 그래픽으로 표시한다.
프로세서(210)는 복수의 영상(130), 공 추적 정보(140), 선수 움직임 정보 및 심판 움직임 정보 등에 기초하여, VAR 영상을 생성할 수 있다. 예를 들어 공 추적 정보(140)에 기초하여 공의 궤적을 컴퓨터 그래픽으로 표시한 VAR 영상이 생성될 수 있다. 프로세서(210)는 다양한 상황에서 VAR 영상을 생성할 수 있다. 일 실시예에서, 프로세서(210)는 VAR 영상을 생성할 것을 지시하는 입력을 수신함에 따라, 각종 정보에 기초하여 VAR 영상을 생성할 수 있다. 프로세서(210)는 생성된 VAR 영상을 영상 송출 기기(170)로 전송하여 중계되도록 할 수 있다.
도 11은 본 개시의 일 실시예에 따른 중계 영상 결정 방법(1100)을 나타낸 도면이다. 중계 영상 결정 방법(1100)은 장치(100)에 의해 수행될 수 있다. 본 방법(1100)은, 카메라 그룹으로부터 공 추적 정보를 획득하는 단계(S1110), 공 추적 정보에 기초하여 랠리의 시작 또는 종료를 결정하는 단계(S1120), 매치의 경기 공간을 촬영한 제1 영상을 영상 송출 기기로 전송하는 단계(S1130), 및/또는 랠리에서 득점한 선수를 촬영한 제2 영상을 영상 송출 기기로 전송하는 단계(S1140)를 포함할 수 있다.
단계 S1110에서, 프로세서(210)는 통신 회로(230)를 통하여, 카메라 그룹(110)으로부터 공 추적 정보(140)를 획득할 수 있다. 단계 S1120에서, 프로세서(210)는 공 추적 정보(140)에 기초하여, 해당 랠리의 시작 또는 종료를 결정할 수 있다. 랠리가 시작되었다는 결정에 따라, 프로세서(210)는 통신 회로(230)를 제어하여, 복수의 영상(130) 중 제1 영상(150)을 영상 송출 기기(170)로 전송할 수 있다(단계 S1130). 랠리가 종료되었다는 결정에 따라, 프로세서(210)는 통신 회로(230)를 제어하여, 복수의 영상(130) 중 제2 영상(160)을 영상 송출 기기(170)로 전송할 수 있다(단계 S1140).
일 실시예에서 방법(1100)은, 프로세서(210)가, 랠리의 시작 전 통신 회로(230)를 통하여 카메라 그룹(110)으로부터 선수 움직임 정보를 획득하는 단계; 선수 움직임 정보에 기초하여 랠리가 시작될 준비가 되었는지 여부를 결정하는 단계; 및/또는 랠리가 시작될 준비가 되었다는 결정에 따라 통신 회로(230)를 제어하여, 복수의 영상(130) 중 제3 영상(320)을 영상 송출 기기(170)로 전송하는 단계를 더 포함할 수 있다.
일 실시예에서, 단계 S1120은, 공이 수직 상방으로 미리 설정된 거리 이상 이동한 후, 미리 설정된 시간 간격 내에 경기 공간(120) 내 시합 표면(400)에 접촉하였는지 여부에 기초하여, 랠리가 시작되었음을 결정하는 단계를 포함할 수 있다.
일 실시예에서, 단계 S1120은, 시합 표면 정보 및/또는 공 추적 정보(140)에 기초하여, 랠리가 종료되었음을 결정하는 단계를 포함할 수 있다.
일 실시예에서, 단계 S1140은, 랠리가 종료되었다는 결정에 따라, 시합 표면 정보 및/또는 공 추적 정보(140)에 기초하여, 랠리 내 득점 여부 및 랠리에서 득점한 선수를 결정하는 단계; 및/또는 득점 여부 및 득점한 선수에 기초하여, 득점 상황 정보를 갱신하고, 복수의 영상(130) 중 제2 영상(160)을 결정하는 단계를 포함할 수 있다.
일 실시예에서, 단계 S1140은, 해당 랠리에서 서브권을 가지는 선수를 지시하는 정보 및/또는 갱신된 득점 상황 정보에 기초하여, 해당 랠리의 다음 랠리에서 서브권을 가진 선수를 결정하는 단계; 및/또는 제2 영상(160)을 전송한 이후, 통신 회로(230)를 제어하여, 복수의 영상(130) 중 제4 영상(640)을 영상 송출 기기(170)로 전송하는 단계를 더 포함할 수 있다.
일 실시예에서, 제4 영상(640)을 영상 송출 기기(170)로 전송하는 단계는, 프로세서(210)가, 공 추적 정보(140)에 기초하여, 랠리 내에서 공이 양 코트 사이를 왕복한 횟수를 결정하는 단계; 왕복한 횟수가 제1 횟수 이상이라는 결정에 따라, 제2 영상(160)을 전송한 이후, 리플레이 영상(650)과 제4 영상(640)을 순차적으로 영상 송출 기기(170)로 전송하는 단계; 및/또는 왕복한 횟수가 제2 횟수 이하라는 결정에 따라, 제2 영상(160)을 전송한 이후, 고속 카메라 영상(660)과 제4 영상(640)을 순차적으로 영상 송출 기기(170)로 전송하는 단계를 포함할 수 있다.
본 개시에 따른 방법들은 컴퓨터로 구현된 방법들일 수 있다. 본 개시에서, 해당 방법들의 각 단계가 소정의 순서대로 도시되고 설명되었지만, 각 단계들은 순차적으로 수행되는 것 이외에, 본 개시에 따라 임의로 조합될 수 있는 순서로 수행될 수도 있다. 일 실시예에서, 적어도 일부의 단계가 병렬적, 반복적 또는 휴리스틱하게 수행될 수 있다. 본 개시는 해당 방법들에 변화 또는 수정을 가하는 것을 제외하지 않는다. 일 실시예에서, 적어도 일부의 단계가 생략되거나, 다른 단계가 추가될 수 있다.
본 개시의 다양한 실시예들은 기기(machine)가 읽을 수 있는 기록 매체(machine-readable recording medium)에 기록된 소프트웨어로 구현될 수 있다. 소프트웨어는 상술한 본 개시의 다양한 실시예들을 구현하기 위한 소프트웨어일 수 있다. 소프트웨어는 본 개시가 속하는 기술분야의 프로그래머들에 의해 본 개시의 다양한 실시예들로부터 추론될 수 있다. 예를 들어 소프트웨어는 기기가 읽을 수 있는 명령(예: 코드 또는 코드 세그먼트) 또는 프로그램일 수 있다. 기기는 기록 매체로부터 호출된 명령어에 따라 동작이 가능한 장치로서, 예를 들어 컴퓨터일 수 있다. 일 실시예에서, 기기는 본 개시의 실시예들에 따른 장치(100)일 수 있다. 일 실시예에서, 기기의 프로세서는 호출된 명령을 실행하여, 기기의 구성요소들이 해당 명령에 해당하는 기능을 수행하게 할 수 있다. 일 실시예에서, 프로세서는 본 개시의 실시예들에 따른 프로세서(210)일 수 있다. 기록 매체는 기기에 의해 읽혀질 수 있는, 데이터가 저장되는 모든 종류의 기록 매체(recording medium)를 의미할 수 있다. 기록 매체는, 예를 들어 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등을 포함할 수 있다. 일 실시예에서, 기록 매체는 메모리(220)일 수 있다. 일 실시예에서, 기록 매체는 네트워크로 연결된 컴퓨터 시스템 등에 분산된 형태로서 구현될 수도 있다. 소프트웨어는 컴퓨터 시스템 등에 분산되어 저장되고, 실행될 수 있다. 기록 매체는 비일시적(non-transitory) 기록 매체일 수 있다. 비일시적 기록 매체는, 데이터가 반영구적 또는 임시적으로 저장되는 것과 무관하게 실재하는 매체(tangible medium)를 의미하며, 일시적(transitory)으로 전파되는 신호(signal)를 포함하지 않는다.
이상 다양한 실시예들에 의해 본 개시의 기술적 사상이 설명되었지만, 본 개시의 기술적 사상은 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자가 이해할 수 있는 범위에서 이루어질 수 있는 다양한 치환, 변형 및 변경을 포함한다. 또한, 그러한 치환, 변형 및 변경은 첨부된 청구범위 내에 포함될 수 있는 것으로 이해되어야 한다. 본 개시에 따른 실시예들은 서로 조합될 수 있다. 각 실시예들은 경우의 수에 따라 다양하게 조합될 수 있으며, 조합되어 만들어진 실시예 역시 본 개시의 범위에 속한다.

Claims (20)

  1. 카메라 그룹이 촬영한 스포츠 매치(match)의 복수의 영상 중 상기 매치를 중계할 영상을 결정하는 장치에 있어서,
    상기 카메라 그룹 및 영상 송출 기기와 통신하는 통신 회로;
    하나 이상의 프로세서; 및
    상기 하나 이상의 프로세서에 의한 실행 시, 상기 하나 이상의 프로세서가 연산을 수행하도록 하는 명령이 저장된 하나 이상의 메모리를 포함하고,
    상기 하나 이상의 프로세서는,
    상기 통신 회로를 통하여, 상기 카메라 그룹으로부터 상기 매치에 사용되는 공을 추적하기 위한 공 추적 정보를 획득하고,
    상기 공 추적 정보에 기초하여, 상기 매치 내 랠리(rally)의 시작 또는 종료를 결정하고,
    상기 랠리가 시작되었다는 결정에 따라, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 매치의 경기 공간(playing space)을 촬영한 제1 영상을 상기 영상 송출 기기로 전송하고,
    상기 랠리가 종료되었다는 결정에 따라, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 랠리에서 득점한 선수를 촬영한 제2 영상을 상기 영상 송출 기기로 전송하는, 장치.
  2. 제1항에 있어서,
    상기 하나 이상의 프로세서는,
    상기 랠리의 시작 전, 상기 통신 회로를 통하여, 상기 카메라 그룹으로부터 선수의 움직임을 추적하기 위한 선수 움직임 정보를 획득하고,
    상기 선수 움직임 정보에 기초하여, 상기 랠리가 시작될 준비가 되었는지 여부를 결정하고,
    상기 랠리가 시작될 준비가 되었다는 결정에 따라, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 랠리에서 서브권을 가진 선수를 촬영한 제3 영상을 상기 영상 송출 기기로 전송하는, 장치.
  3. 제1항에 있어서,
    상기 하나 이상의 프로세서는,
    상기 공이 수직 상방으로 미리 설정된 거리 이상 이동하였는지 여부에 기초하여, 상기 랠리가 시작되었음을 결정하는, 장치.
  4. 제3항에 있어서,
    상기 하나 이상의 프로세서는,
    상기 공이 수직 상방으로 미리 설정된 거리 이상 이동한 후, 미리 설정된 시간 간격 내에 상기 경기 공간 내 시합 표면에 접촉하였는지 여부에 기초하여, 상기 랠리가 시작되었음을 결정하는, 장치.
  5. 제1항에 있어서,
    상기 하나 이상의 프로세서는,
    상기 경기 공간 내 시합 표면을 지시하는 시합 표면 정보 및 상기 공 추적 정보에 기초하여, 상기 랠리가 종료되었음을 결정하는, 장치.
  6. 제5항에 있어서,
    상기 하나 이상의 프로세서는,
    상기 공이 상기 시합 표면의 한 코트에 접촉한 후 미리 설정된 제1 시간 간격 내에 상기 시합 표면의 다른 한 코트에 접촉하지 않는 경우 또는 상기 공의 속력이 미리 설정된 제2 시간 간격 이상 일정량 이하를 유지하는 경우, 상기 랠리가 종료되었음을 결정하는, 장치.
  7. 제5항에 있어서,
    상기 하나 이상의 프로세서는,
    상기 랠리가 종료되었다는 결정에 따라, 상기 시합 표면 정보 및 상기 공 추적 정보에 기초하여, 상기 랠리 내 득점 여부 및 상기 랠리에서 득점한 선수를 결정하고,
    상기 득점 여부 및 상기 득점한 선수에 기초하여, 상기 매치의 득점 상황 정보를 갱신하고, 상기 복수의 영상 중 상기 제2 영상을 결정하는, 장치.
  8. 제7항에 있어서,
    상기 하나 이상의 프로세서는,
    상기 랠리에서 서브권을 가지는 선수를 지시하는 정보 및 상기 갱신된 득점 상황 정보에 기초하여, 상기 랠리의 다음 랠리에서 서브권을 가진 선수를 결정하고,
    상기 제2 영상을 전송한 이후, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 다음 랠리에서 서브권을 가진 선수를 촬영한 제4 영상을 상기 영상 송출 기기로 전송하는, 장치.
  9. 제8항에 있어서,
    상기 하나 이상의 프로세서는,
    상기 공 추적 정보에 기초하여, 상기 랠리 내에서 상기 공이 양 코트 사이를 왕복한 횟수를 결정하고,
    상기 왕복한 횟수가 제1 횟수 이상이라는 결정에 따라, 상기 제2 영상을 전송한 이후, 상기 랠리의 리플레이 영상과 상기 제4 영상을 순차적으로 상기 영상 송출 기기로 전송하고,
    상기 왕복한 횟수가 상기 제1 횟수보다 작은 제2 횟수 이하라는 결정에 따라, 상기 제2 영상을 전송한 이후, 상기 랠리를 고속 카메라로 촬영한 고속 카메라 영상과 상기 제4 영상을 순차적으로 상기 영상 송출 기기로 전송하는, 장치.
  10. 제9항에 있어서,
    상기 하나 이상의 프로세서는,
    상기 복수의 영상 중 상기 랠리가 시작된 것으로 결정한 시점부터 상기 랠리가 종료된 것으로 결정한 시점까지의 시간 간격에 해당하는 적어도 한 영상에 기초하여 상기 리플레이 영상을 생성하는, 장치.
  11. 제8항에 있어서,
    상기 하나 이상의 프로세서는,
    상기 공 추적 정보에 기초하여, 상기 랠리 내 상기 공의 수평 방향 속력의 평균값을 결정하고,
    상기 평균값이 미리 설정된 값 이상이라는 결정에 따라, 상기 랠리에 대한 분석 정보를 포함하는 랠리 분석 영상을 생성하고,
    상기 제4 영상을 전송하기 이전에, 상기 통신 회로를 제어하여, 상기 랠리 분석 영상을 상기 영상 송출 기기로 전송하고,
    상기 랠리에 대한 분석 정보는, 상기 랠리에서 상기 공이 상기 시합 표면에 접촉한 위치를 시계열적으로 지시하는 정보를 포함하는, 장치.
  12. 제1항에 있어서,
    상기 하나 이상의 프로세서는,
    상기 득점 상황 정보에 기초하여, 상기 랠리가 포함된 게임이 종료되었음을 결정하고,
    상기 게임이 종료되었다는 결정에 따라, 상기 게임에 대한 분석 정보를 포함하는 게임 분석 영상을 생성하고,
    상기 통신 회로를 제어하여, 상기 게임 분석 영상을 상기 영상 송출 기기로 전송하고,
    상기 게임에 대한 분석 정보는, 상기 게임 내 선수별 서브 방향, 서브 성공률, 공격 방향 및 공격 성공률 중에서 선택된 적어도 하나의 정보를 포함하는, 장치.
  13. 카메라 그룹이 촬영한 스포츠 매치(match)의 복수의 영상 중 상기 매치를 중계할 영상을 결정하는 방법에 있어서,
    하나 이상의 프로세서가,
    통신 회로를 통하여, 상기 카메라 그룹으로부터 상기 매치에 사용되는 공을 추적하기 위한 공 추적 정보를 획득하는 단계;
    상기 공 추적 정보에 기초하여, 상기 매치 내 랠리(rally)의 시작 또는 종료를 결정하는 단계;
    상기 랠리가 시작되었다는 결정에 따라, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 매치의 경기 공간(playing space)을 촬영한 제1 영상을 영상 송출 기기로 전송하는 단계; 및
    상기 랠리가 종료되었다는 결정에 따라, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 랠리에서 득점한 선수를 촬영한 제2 영상을 상기 영상 송출 기기로 전송하는 단계를 포함하는, 방법.
  14. 제13항에 있어서,
    상기 하나 이상의 프로세서가,
    상기 랠리의 시작 전, 상기 통신 회로를 통하여, 상기 카메라 그룹으로부터 선수의 움직임을 추적하기 위한 선수 움직임 정보를 획득하는 단계;
    상기 선수 움직임 정보에 기초하여, 상기 랠리가 시작될 준비가 되었는지 여부를 결정하는 단계; 및
    상기 랠리가 시작될 준비가 되었다는 결정에 따라, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 랠리에서 서브권을 가진 선수를 촬영한 제3 영상을 상기 영상 송출 기기로 전송하는 단계를 더 포함하는, 방법.
  15. 제13항에 있어서,
    상기 매치 내 랠리의 시작 또는 종료를 결정하는 단계는,
    상기 공이 수직 상방으로 미리 설정된 거리 이상 이동한 후, 미리 설정된 시간 간격 내에 상기 경기 공간 내 시합 표면에 접촉하였는지 여부에 기초하여, 상기 랠리가 시작되었음을 결정하는 단계를 포함하는, 방법.
  16. 제13항에 있어서,
    상기 매치 내 랠리의 시작 또는 종료를 결정하는 단계는,
    상기 경기 공간 내 시합 표면을 지시하는 시합 표면 정보 및 상기 공 추적 정보에 기초하여, 상기 랠리가 종료되었음을 결정하는 단계를 포함하는, 방법.
  17. 제16항에 있어서,
    상기 제2 영상을 상기 영상 송출 기기로 전송하는 단계는,
    상기 랠리가 종료되었다는 결정에 따라, 상기 시합 표면 정보 및 상기 공 추적 정보에 기초하여, 상기 랠리 내 득점 여부 및 상기 랠리에서 득점한 선수를 결정하는 단계; 및
    상기 득점 여부 및 상기 득점한 선수에 기초하여, 상기 매치의 득점 상황 정보를 갱신하고, 상기 복수의 영상 중 상기 제2 영상을 결정하는 단계를 포함하는, 방법.
  18. 제17항에 있어서,
    상기 제2 영상을 상기 영상 송출 기기로 전송하는 단계는,
    상기 랠리에서 서브권을 가지는 선수를 지시하는 정보 및 상기 갱신된 득점 상황 정보에 기초하여, 상기 랠리의 다음 랠리에서 서브권을 가진 선수를 결정하는 단계; 및
    상기 제2 영상을 전송한 이후, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 다음 랠리에서 서브권을 가진 선수를 촬영한 제4 영상을 상기 영상 송출 기기로 전송하는 단계를 더 포함하는, 방법.
  19. 제18항에 있어서,
    상기 제4 영상을 상기 영상 송출 기기로 전송하는 단계는,
    상기 공 추적 정보에 기초하여, 상기 랠리 내에서 상기 공이 양 코트 사이를 왕복한 횟수를 결정하는 단계;
    상기 왕복한 횟수가 제1 횟수 이상이라는 결정에 따라, 상기 제2 영상을 전송한 이후, 상기 랠리의 리플레이 영상과 상기 제4 영상을 순차적으로 상기 영상 송출 기기로 전송하는 단계; 및
    상기 왕복한 횟수가 상기 제1 횟수보다 작은 제2 횟수 이하라는 결정에 따라, 상기 제2 영상을 전송한 이후, 상기 랠리를 고속 카메라로 촬영한 고속 카메라 영상과 상기 제4 영상을 순차적으로 상기 영상 송출 기기로 전송하는 단계를 포함하는, 방법.
  20. 하나 이상의 프로세서에 의한 실행 시, 상기 하나 이상의 프로세서가 연산을 수행하도록 하는 명령을 기록한 비일시적 컴퓨터 판독 가능 기록 매체에 있어서,
    상기 명령은, 상기 하나 이상의 프로세서가,
    통신 회로를 통하여, 카메라 그룹으로부터 스포츠 매치(match)에 사용되는 공을 추적하기 위한 공 추적 정보를 획득하고,
    상기 공 추적 정보에 기초하여, 상기 매치 내 랠리(rally)의 시작 또는 종료를 결정하고,
    상기 랠리가 시작되었다는 결정에 따라, 상기 통신 회로를 제어하여, 상기 카메라 그룹이 촬영한 상기 매치의 복수의 영상 중 상기 매치의 경기 공간(playing space)을 촬영한 제1 영상을 영상 송출 기기로 전송하고,
    상기 랠리가 종료되었다는 결정에 따라, 상기 통신 회로를 제어하여, 상기 복수의 영상 중 상기 랠리에서 득점한 선수를 촬영한 제2 영상을 상기 영상 송출 기기로 전송하도록 하는, 컴퓨터 판독 가능 기록 매체.
PCT/KR2021/014784 2020-10-22 2021-10-21 스포츠 중계를 위한 영상을 결정하는 장치, 방법 및 명령을 기록한 기록 매체 WO2022086202A1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP21883270.7A EP4235489A4 (en) 2020-10-22 2021-10-21 DEVICE AND METHOD FOR DETERMINING AN IMAGE FOR SPORTS BROADCASTING AND RECORDING MEDIUM WITH A COMMAND RECORDED THEREOF
JP2023549788A JP2023549982A (ja) 2020-10-22 2021-10-21 スポーツ中継のための映像を決定する装置、方法及び命令を記録した記録媒体
US18/033,156 US20230386051A1 (en) 2020-10-22 2021-10-21 Device and method for determining video for sports broadcasting, and recording medium storing instructions

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
KR10-2020-0137212 2020-10-22
KR20200137212 2020-10-22
KR10-2021-0052395 2021-04-22
KR20210052395 2021-04-22
KR10-2021-0084172 2021-06-28
KR20210084172 2021-06-28

Publications (1)

Publication Number Publication Date
WO2022086202A1 true WO2022086202A1 (ko) 2022-04-28

Family

ID=81290875

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2021/014784 WO2022086202A1 (ko) 2020-10-22 2021-10-21 스포츠 중계를 위한 영상을 결정하는 장치, 방법 및 명령을 기록한 기록 매체

Country Status (5)

Country Link
US (1) US20230386051A1 (ko)
EP (1) EP4235489A4 (ko)
JP (1) JP2023549982A (ko)
KR (1) KR102454801B1 (ko)
WO (1) WO2022086202A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7505838B1 (ja) * 2022-09-28 2024-06-25 株式会社ユニゾンシステムズ 撮像システム、撮像プログラム、及び撮像方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4200219B2 (ja) * 2002-07-26 2008-12-24 独立行政法人情報通信研究機構 画像認識装置及び画像認識プログラム
US20130039538A1 (en) * 2011-08-12 2013-02-14 Henri Johnson Ball trajectory and bounce position detection
JP2017513385A (ja) * 2014-04-03 2017-05-25 ピクセルロット エルティーディー．Ｐｉｘｅｌｌｏｔ Ｌｔｄ． 自動的にテレビ番組を制作する方法及びシステム
KR101888747B1 (ko) * 2016-08-23 2018-08-23 주식회사 픽셀스코프 구기 스포츠에서의 이벤트 영상 제공 시스템 및 이를 이용한 이벤트 영상 생성 방법
JP2020054747A (ja) * 2018-10-04 2020-04-09 パナソニックＩｐマネジメント株式会社 プレイ分析装置、及び、プレイ分析方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2402011B (en) * 2003-05-20 2006-11-29 British Broadcasting Corp Automated video production
KR100974638B1 (ko) * 2009-06-23 2010-08-10 송지을 야구 경기 중계방송 시스템 및 방법
US9999825B2 (en) * 2012-02-23 2018-06-19 Playsight Interactive Ltd. Smart-court system and method for providing real-time debriefing and training services of sport games
JP6267961B2 (ja) * 2012-08-10 2018-01-24 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 映像提供方法および送信装置
JP6663848B2 (ja) * 2014-08-04 2020-03-13 パナソニック株式会社 移動体追跡方法および移動体追跡装置
KR101879368B1 (ko) * 2016-08-23 2018-07-18 주식회사 픽셀스코프 구기 스포츠에서의 이벤트 영상 제공 시스템 및 이를 이용한 인/아웃 판단 방법
KR102107055B1 (ko) * 2018-12-26 2020-05-06 건국대학교 산학협력단 기계학습 기반의 스포츠 중계 영상 추천 방법 및 장치
KR20200114412A (ko) * 2019-03-28 2020-10-07 주식회사 케이티 스포츠 경기 중계를 위한 장치 및 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4200219B2 (ja) * 2002-07-26 2008-12-24 独立行政法人情報通信研究機構 画像認識装置及び画像認識プログラム
US20130039538A1 (en) * 2011-08-12 2013-02-14 Henri Johnson Ball trajectory and bounce position detection
JP2017513385A (ja) * 2014-04-03 2017-05-25 ピクセルロット エルティーディー．Ｐｉｘｅｌｌｏｔ Ｌｔｄ． 自動的にテレビ番組を制作する方法及びシステム
KR101888747B1 (ko) * 2016-08-23 2018-08-23 주식회사 픽셀스코프 구기 스포츠에서의 이벤트 영상 제공 시스템 및 이를 이용한 이벤트 영상 생성 방법
JP2020054747A (ja) * 2018-10-04 2020-04-09 パナソニックＩｐマネジメント株式会社 プレイ分析装置、及び、プレイ分析方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP4235489A4 *

Also Published As

Publication number Publication date
US20230386051A1 (en) 2023-11-30
EP4235489A1 (en) 2023-08-30
EP4235489A4 (en) 2024-10-02
JP2023549982A (ja) 2023-11-29
KR102454801B1 (ko) 2022-10-17
KR20220053493A (ko) 2022-04-29

Similar Documents

Publication Publication Date Title
US10289209B2 (en) Information processing apparatus, information processing method, and recording medium
US8858333B2 (en) Method and system for media control
US20160205317A1 (en) Information processing device, recording medium, and information processing method
WO2022086202A1 (ko) 스포츠 중계를 위한 영상을 결정하는 장치, 방법 및 명령을 기록한 기록 매체
US20130265448A1 (en) Analyzing Human Gestural Commands
WO2019124640A1 (ko) 스마트장치를 이용한 운동경기 기록 및 중계 시스템
US20210120218A1 (en) Information processing system, information processing method and non-transitory computer readable medium
WO2017026664A1 (ko) 골프스윙영상 정보 제공 시스템, 골프스윙영상 정보 제공을 위한 카메라 장치 및 골프스윙영상 정보 제공방법
US20210047036A1 (en) Controller and imaging method
JP2021145702A (ja) 球技映像解析装置、球技映像解析システム、球技映像解析方法、及び、コンピュータプログラム
WO2015020466A1 (ko) Ａｒ 글래스를 이용한 스포츠 경기 판정 시스템 및 방법
WO2012128566A2 (ko) 가상 골프 시뮬레이션 장치 및 그 방법과, 이에 이용되는 센싱장치 및 센싱방법
CN114143561A (zh) 一种超高清视频多视角漫游播放方法
CN107635627B (zh) 台球击球辅助方法、台球击球辅助系统及便携式电子设备
WO2023113492A1 (ko) 카메라와 레이더 센서를 이용한 스포츠 트레이닝 영상 제공방법
CN115225926B (zh) 游戏直播的画面处理方法、装置、计算机设备和存储介质
KR20210033759A (ko) Ai 기반 영상 자동 추적 및 재생장치와 방법
JP5687670B2 (ja) 表示制御システム、ゲームシステム、表示制御装置、及びプログラム
WO2016027947A1 (ko) 실시간 분석 및 예측에 의한 참여형 스포츠 게임 시스템 및 스포츠 게임 방법
JP2020021104A (ja) 情報処理装置、情報処理のシステム、およびそれらの制御方法、プログラム
CN108449362A (zh) 基于虚拟现实成像的交互系统
WO2020004885A1 (ko) 볼의 운동에 대한 센싱장치 및 그 센싱방법
JP2015217122A (ja) 画像報知装置、撮像装置、画像報知方法及び画像報知プログラム
WO2019045173A1 (ko) 소실 처리를 지원하는 게임 시스템 및 방법
JP2022094789A (ja) 情報処理装置、情報処理方法、及び、プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21883270

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 18033156

Country of ref document: US

Ref document number: 2023549788

Country of ref document: JP

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2021883270

Country of ref document: EP

Effective date: 20230522