WO2020250891A1 - スポーツ動画管理システム - Google Patents

スポーツ動画管理システム Download PDF

Info

Publication number
WO2020250891A1
WO2020250891A1 PCT/JP2020/022703 JP2020022703W WO2020250891A1 WO 2020250891 A1 WO2020250891 A1 WO 2020250891A1 JP 2020022703 W JP2020022703 W JP 2020022703W WO 2020250891 A1 WO2020250891 A1 WO 2020250891A1
Authority
WO
WIPO (PCT)
Prior art keywords
user terminal
sports video
management server
work
sports
Prior art date
Application number
PCT/JP2020/022703
Other languages
English (en)
French (fr)
Inventor
隆一 河村
道隆 渡慶次
Original Assignee
アミフィアブル株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by アミフィアブル株式会社 filed Critical アミフィアブル株式会社
Publication of WO2020250891A1 publication Critical patent/WO2020250891A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services

Definitions

  • the present invention includes a sports video management system, particularly a first user terminal, a second user terminal, and a management server capable of communicating with these through a network, and a sports video management that grants a predetermined reward by a predetermined work on the sports video. Regarding the system.
  • Patent Document 1 discloses a technique for rewarding a content translator who has translated a content based on a translation evaluation from an information communication terminal of the content user.
  • machine learning may be used to analyze and evaluate a large amount of moving images.
  • the quality and quantity of teacher data are important, and among them, tagging (annotation) of objects in a moving image greatly affects the accuracy of learning.
  • one object of the present invention is to provide a system capable of efficiently performing annotation work particularly for sports moving images.
  • the sports video management system for achieving the above problems includes a first user terminal, a second user terminal, and a management server capable of communicating with these through a network, and is predetermined by a predetermined work on the sports video.
  • a sports video management system that grants rewards, in which the first user terminal transmits a sports video to a management server, and the management server provides the received sports video to the second user terminal and an object in the sports video. Is urged to perform the work of giving the predetermined identification information, the work by the second user terminal is evaluated based on the completed sports video in which the work is performed, and the second user terminal is rewarded according to the evaluation. Is given, and a plurality of available service information is provided to the second user terminal, and the second The user terminal sends a service usage request related to the service information to the management server by paying a reward.
  • the identification information is given to the object of the sports video transmitted to the management server by the first user terminal. Because it can give incentives The work of adding identification information to sports videos can be performed efficiently.
  • the second user terminal of this sports video management system presents the sports video to the second user terminal, and at least one of evaluation and analysis of the sports video, labeling of objects included in the sports video, or abstraction of the sports video.
  • the work is performed and the type of work and the work result are sent to the management server.
  • the second user terminal of the sports video management system includes an imaging unit that captures the sports video, a reception unit that accepts work for the captured sports video, and a transmission unit that transmits the completed sports video to the management server. Is.
  • the management server of the sports video management system transmits the work-completed sports video received from one second user terminal to another second user terminal to send a secondary evaluation regarding the content of the work, and the secondary evaluation is performed. A reward is given to the second user terminal accordingly.
  • FIG. 1 is a diagram illustrating an outline of a sports video management system according to the present embodiment.
  • the sports video management system 10 includes a first user terminal 20 and a second user terminal 3. 0, and a management server 50 that can communicate with these through networks such as the Internet network To be equipped.
  • the first user terminal 20 is possessed by the first user 1
  • the second user terminal 30 is possessed by the second users 2a to 2n
  • the management server 50 is deployed to the management company 3 of the sports video management system 10.
  • the sports video management system 10 has a first user terminal 20 and a second user terminal 20.
  • the sports video M, the virtual currency C as a reward, and the service information I are managed between the user terminal 30 and the management server 50, and the sports video M is, for example, a soccer video.
  • the virtual currency C is transferred from the management server 50 to the first user terminal 20 and the second user terminal 30.
  • the second user terminal 30 provides the service information I to the management server 50.
  • FIG. 2 is a block diagram illustrating an outline of the configuration of the first user terminal 20 and the second user terminal 30. As shown in the figure, both the first user terminal 20 and the second user terminal 30 are implemented by a smartphone in the present embodiment, and include an annotation program 40, a secondary evaluation program 41, and a virtual currency processing program 42.
  • the annotation program 40 is the moving image input module 40a.
  • the annotation module 40b which is a reception unit, and the moving image transmission module 40c, which is a transmission unit, are provided.
  • the moving image input module 40a is a module for inputting a sports moving image M imaged by a camera of a smartphone which is an imaging unit, and is an annotation module 40b. Is a module that executes the work of annotating the object of the sports moving image M input to the moving image input module 40a with identification information.
  • FIG. 3 is a diagram illustrating an outline of processing of the annotation module 40b.
  • the annotation module 40b assigns annotation A to a soccer player P and a soccer ball B, which are objects of the sports video M, to label the objects or abstract the sports video M.
  • the annotation A1 is given to the player P
  • the annotation A2 is given to the right foot of the player P
  • the annotation A3 is given to the left foot of the player P
  • the annotation A4 is given to the soccer ball B.
  • this annotation A is individually input for each frame constituting the sports moving image M via a physical interface such as a touch panel of a smartphone.
  • the moving image transmission module 40c is a module for transmitting the completed sports moving image M to which the annotation A is added to the management server 50.
  • the secondary evaluation program 41 is a program that secondarily evaluates whether or not the annotation A is appropriately attached to the object of the sports video M for each frame constituting the sports video M. is there.
  • this secondary evaluation program 41 for example, an addition method in which 1 point is given when annotation A is properly given and no points are given when annotation A is not properly given, or annotation A is used.
  • Various evaluation methods are adopted, such as a point deduction method in which points are not given when the annotation A is properly given and points are reduced when the annotation A is not given properly.
  • the virtual currency processing program 42 is a program that executes processing of the virtual currency C.
  • the virtual currency C provided from the management server 50 is accumulated and the virtual currency C is provided to the management server 50.
  • the request data d which is a usage request, is transmitted to the management server 50.
  • FIG. 4 is a block diagram illustrating an outline of the configuration of the management server 50.
  • the management server 50 includes a processor 51, a memory 52, a storage 53, a transmission / reception unit 54, and an input / output unit 55 as main configurations, and these are electrically connected to each other via a bus 56.
  • the processor 51 is an arithmetic unit that controls the operation of the management server 50, controls the transmission and reception of data between each element, and performs processing necessary for executing a program.
  • the processor 51 is, for example, a CPU (Central Process Unit). It is a ssing unit), and each process is performed by executing a program stored in the storage 53 described later and expanded in the memory 52.
  • CPU Central Process Unit
  • the memory 52 is a DRAM (Dynamic Random Access Memory).
  • Main storage device composed of volatile storage devices such as y), flash memory and HDD (Ha) It is provided with an auxiliary storage device composed of a non-volatile storage device such as rd Disc Drive).
  • BIOS Basic Input / Output System
  • the storage 53 stores information used for programs and various processes. The configuration of the storage 53 will be described later.
  • the transmission / reception unit 54 connects the management server 50 to a network such as an Internet network, and is used for Bluetooth (registered trademark) or BLE (Bluetooth Low E). It may be provided with a short-range communication interface such as nergy).
  • the input / output unit 55 is an interface to which an input / output device is connected, and an information input device such as a keyboard or a mouse and an output device such as a display are connected as needed.
  • the bus 56 includes a connected processor 51a, a memory 52, a storage 53, and a transmission / reception unit 54. And, for example, an address signal, a data signal, and various control signals are transmitted between the input / output unit 55.
  • FIG. 5 is a block diagram illustrating an outline of the configuration of the storage 53.
  • the storage 53 stores a database 53a, an evaluation program 53b, a virtual currency management program 53c, an artificial intelligence program 53d, a video processing application 53e, an educational application 53f, and an analysis application 53g.
  • the video processing application 53e, the educational application 53f, and the analysis application 53g are applications that can be executed by the first user terminal 20 and the second user terminal 30 implemented on the smartphone, and these video processing applications 53e.
  • Educational application 53f and analysis application 53g constitute service information I.
  • the database 53a is realized by the storage area of the storage 53, and the sports moving image M transmitted from the first user terminal 20 and the work-worked sports with the annotation A transmitted from the second user terminal 30 are added.
  • the moving image M is stored.
  • the evaluation program 53b evaluates whether or not the annotation A is added to the work-worked sports video M object to which the annotation A is attached, which is transmitted from the second user terminal 30, for each frame constituting the sports video M. It is a program to do.
  • evaluation is performed by determining whether or not annotation A exists in each frame constituting the sports moving image M.
  • FIG. 6 is a block diagram illustrating an outline of processing executed by the virtual currency management program 53c. As shown in the figure, in the virtual currency management program 53c, the first process S1 and the second process S 2. The third process S3 and the fourth process S4 are executed.
  • the first process S1 when the sports video M is transmitted from the first user terminal 20, the first process S1 The process of assigning the virtual currency C to the user terminal 20 is executed.
  • the process of assigning the virtual currency C to the second user terminal 30 is executed according to the secondary evaluation.
  • the artificial intelligence program 53d is a program that performs machine learning using the completed sports video M to which the annotation A is attached stored in the database 53a as training data to generate a trained model.
  • Techniques for machine learning include neural networks, random forests, and SVMs.
  • Various algorithms such as (support vector machine) are appropriately used.
  • FIG. 7 is a diagram illustrating an outline of processing of the moving image processing application 53e.
  • FIG. 7 (a ) In the moving image processing application 53e, at an arbitrary time (for example, 3 seconds) from the time when the camera of the first user terminal 20 or the second user terminal 30 mounted on the smartphone starts capturing the sports moving image M.
  • the process E1 for retroactively imaging is executed.
  • the moving image processing application 53e based on the sports moving image M captured by the cameras of the plurality of first user terminals 20 or the second user terminal 30 and stored in the database 53a, respectively. , The process E2 of dividing moving images from a plurality of angles into frames and simultaneously displaying them on the display unit of the second user terminal 30 is executed.
  • a group of users for example, "team” sharing the sports moving image M captured by the camera of the first user terminal 20 or the second user terminal 30 or the like.
  • the process E3 of creating a "family” or the like and sharing the sports video M with the created group is executed.
  • FIG. 8 is a diagram illustrating an outline of processing of the educational application 53f. As shown in FIG. 8A, in the educational application 53f, various problems related to soccer movements, tactics, and the like are displayed as text T on the display unit of the second user terminal 30.
  • the answer to the problem is displayed on the display unit of the second user terminal 30 as the animation video D.
  • FIG. 9 is a diagram illustrating an outline of processing of the analysis application 53g.
  • the analysis application 53g analyzes the sports moving image M captured in real time by the camera of the second user terminal 30 based on the learned model generated by the artificial intelligence program 53d.
  • the first user 1 transmits the sports moving image M captured by the first user terminal 20 to the management server 50. Based on this, the management server 50 assigns the virtual currency C to the first user terminal 20.
  • the management server 50 stores the sports video M transmitted from the first user terminal 20 in the database 53a, and provides the sports video M to the second user terminal 30 of the second user 2a to annotate the object of the sports video M.
  • the second user 2a is proposed to perform the work of assigning A.
  • the second user 2a executes the work of adding the annotation A to the object of the sports video M, and the completed sports video M to which the annotation A is given is the type of work performed on the sports video M ( It is transmitted to the management server 50 together with the labeling of the object or the abstraction of the sports video M).
  • the management server 50 stores the sports video M transmitted from the second user terminal 30 in the database 53a, and evaluates by, for example, determining whether or not the annotation A exists in each frame constituting the sports video M. I do.
  • the management server 50 assigns the virtual currency C to the second user terminal 30 of the second user 2a.
  • the management server 50 transfers the completed sports video M to which the annotation A transmitted from the second user terminal 30 of the second user 2a is added to the second user terminal 3 of the second user 2b. It is provided to 0 and is proposed to the second user 2b to perform a secondary evaluation as to whether or not the annotation A is properly attached to the object of the sports moving image M.
  • the management server 50 is the second user terminal of the second user 2a based on the secondary evaluation.
  • the virtual currency C is given to 30 and the virtual currency C is also given to the second user terminal 30 of the second user 2b.
  • the second user 2n uses the service information I on the second user terminal 30, the second user 2n
  • the second user terminal 30 of the user 2n provides the virtual currency C to the management server 50 and transmits the request data d to the management server 50.
  • the video processing application 53e, the education application 53f, and the analysis application 53g that constitute the service information I can be used in the second user terminal 30 of the second user 2n.
  • the virtual currency C that can use the service information I managed by the management server 50 is given to the second user terminals 30 of the plurality of second users 2a to 2n, and is managed by the first user 1.
  • An incentive to add annotation A can be given to the object of the sports moving image M transmitted to the server 50.
  • the management server 50 is created by the first user 1.
  • the second users 2a to 2n give the annotation A to the sports moving image M imaged by the second user terminal 30 by themselves. It may be something to do.
  • the sports moving image M captured by the first user 1 on the first user terminal 20 may be annotated by the first user 1 on his / her own using the first user terminal 20.
  • An example of virtual currency has been given as a reward for work and operations performed by a user such as annotation work and evaluation thereof according to the present embodiment, but the reward according to the present invention is not limited to this.
  • points, miles, coins, coupons, etc. issued by the system operator or another operator designated by the operator can be widely included, which can be economically equated with the virtually issued currency.
  • the right to use the system or the service or software provided by the system through the virtual currency can be included.
  • the users can use the enriched system by accumulating the work by the users, and it is possible to promote continuous expansion and optimization.
  • Sports video management system 20 1st user terminal 30 2nd user terminal 40 Annotation addition program 40b Annotation addition module (reception unit) 40c video transmission module (transmitter) 41 Secondary evaluation program 50 Management server 53b Evaluation program 53d Artificial intelligence program 53e Video processing application 53f Education application 53g Analysis application A Annotation (identification information) C virtual currency (reward) I Service information M Sports video d Request data (use request)

Landscapes

  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

【課題】スポーツ動画に対するアノテーション作業を効率よく行うことのできるシステム を提供する。 【解決手段】第1ユーザ端末、第2ユーザ端末及びこれらとネットワークを通じて通信可 能な管理サーバを備え、スポーツ動画への所定の作業によって所定の報酬を付与するスポ ーツ動画管理システムであって、第1ユーザ端末は、スポーツ動画を管理サーバに送信し 、管理サーバは、受信したスポーツ動画を第2ユーザ端末に提供するとともに、スポーツ 動画内のオブジェクトに対して所定の識別情報を付与する作業を行わせるように促し、作 業がされた作業済みスポーツ動画に基づいて、第2ユーザ端末による作業を評価し、評価 に応じて第2ユーザ端末に報酬を付与し、第2ユーザ端末に対して、利用可能な複数のサ ービス情報を提供し、第2ユーザ端末は、報酬を支払うことによりサービス情報にかかる サービスの利用リクエストを前記管理サーバに送信する。

Description

スポーツ動画管理システム
 本発明は、スポーツ動画管理システム、特に、第1ユーザ端末、第2ユーザ端末及びこ
れらとネットワークを通じて通信可能な管理サーバを備え、スポーツ動画への所定の作業
によって所定の報酬を付与するスポーツ動画管理システムに関する。
 近年、ユーザに対して所定の作業を行わせて、その作業の対価として所定の報酬を付与
するシステムが提案されている。
 特許文献1には、コンテンツ利用者の情報通信端末からの翻訳評価に基づいて、翻訳を
行ったコンテンツ翻訳者に対して報酬を与える技術が開示されている。
特開2006-134224公報
 一方、近年、大量の動画を分析・評価するために機械学習が利用されることがある。こ
のような機械学習においては、教師データの質と量が重要であり、その中でも、動画内の
オブジェクトに対するタグ付け(アノテーション)は学習の精度に大きく影響する。
 しかしながら、このような作業を正確に行うためには、人的及び経済的なリソース負担
が極めて大きい。
 そこで、本発明は、特にスポーツ動画に対するアノテーション作業を効率よく行うこと
のできるシステムを提供することを一つの目的とする。
 上記課題を達成するための、本発明に係るスポーツ動画管理システムは、第1ユーザ端
末、第2ユーザ端末及びこれらとネットワークを通じて通信可能な管理サーバを備え、ス
ポーツ動画への所定の作業によって所定の報酬を付与するスポーツ動画管理システムであ
って、第1ユーザ端末は、スポーツ動画を管理サーバに送信し、管理サーバは、受信した
スポーツ動画を第2ユーザ端末に提供するとともに、スポーツ動画内のオブジェクトに対
して所定の識別情報を付与する作業を行わせるように促し、作業がされた作業済みスポー
ツ動画に基づいて、第2ユーザ端末による作業を評価し、評価に応じて第2ユーザ端末に
報酬を付与し、第2ユーザ端末に対して、利用可能な複数のサービス情報を提供し、第2
ユーザ端末は、報酬を支払うことによりサービス情報にかかるサービスの利用リクエスト
を管理サーバに送信する、ものである。
 これによれば、サービス情報を利用することができる報酬を第2ユーザの第2ユーザ端
末に付与することによって、第1ユーザ端末によって管理サーバに送信されたスポーツ動
画のオブジェクトに識別情報を付与するインセンティブを与えることができることから、
スポーツ動画に対する識別情報の付与作業を効率的に行うことができる。
 このスポーツ動画管理システムの第2ユーザ端末は、スポーツ動画を第2ユーザ端末に
提示して、スポーツ動画の評価及び分析、スポーツ動画に含まれるオブジェクトのラベリ
ングまたはスポーツ動画の抽象化の少なくともいずれかの作業を行わせ、作業の種別と作
業結果とを管理サーバに送信する、ものである。
 さらに、スポーツ動画管理システムの第2ユーザ端末は、スポーツ動画を撮像する撮像
部、撮像したスポーツ動画に対して作業を受け付ける受付部、作業済スポーツ動画を管理
サーバに送信する送信部、を備えるものである。
 しかも、スポーツ動画管理システムの管理サーバは、一の第2ユーザ端末から受信した
作業済スポーツ動画を他の第2ユーザ端末に送信して作業の内容に関する二次評価を送信
させ、二次評価に応じて第2ユーザ端末に報酬を付与する、ものである。
 この発明によれば、スポーツ動画に対する識別情報の付与作業を効率的に行うことがで
きる。
本発明の実施の形態に係るスポーツ動画管理システムの概略を説明する図である。 同じく、本実施の形態に係る第1ユーザ端末及び第2ユーザ端末の構成の概略を説明するブロック図である。 同じく、本実施の形態に係る第1ユーザ端末及び第2ユーザ端末の受付部の処理の概略を説明する図である。 同じく、本実施の形態に係るスポーツ動画管理システムの管理サーバの構成の概略を説明するブロック図である。 同じく、本実施の形態に係るスポーツ動画管理システムの管理サーバのストレージの構成の概略を説明するブロック図である。 同じく、本実施の形態に係るスポーツ動画管理システムの管理サーバのストレージに格納される仮想通貨管理プログラムで実行される処理の概略を説明するブロック図である。 同じく、本実施の形態に係るスポーツ動画管理システムの管理サーバのストレージに格納される動画処理アプリケーションの処理の概略を説明する図である。 同じく、本実施の形態に係るスポーツ動画管理システムの管理サーバのストレージに格納される教育アプリケーションの処理の概略を説明する図である。 同じく、本実施の形態に係るスポーツ動画管理システムの管理サーバのストレージに格納される分析アプリケーションの処理の概略を説明する図である。
 次に、図1~図9に基づいて、本発明の実施の形態に係るスポーツ動画管理システムに
ついて説明する。
 図1は、本実施の形態に係るスポーツ動画管理システムの概略を説明する図である。図
示のように、スポーツ動画管理システム10は、第1ユーザ端末20、第2ユーザ端末3
0、及びこれらとインターネット網等のネットワークを通じて通信可能な管理サーバ50
を備える。
 第1ユーザ端末20は、第1ユーザ1に所持され、第2ユーザ端末30は、第2ユーザ
2a~2nに所持され、管理サーバ50は、スポーツ動画管理システム10の管理事業者
3に配備される。
 このスポーツ動画管理システム10は、本実施の形態では、第1ユーザ端末20と第2
ユーザ端末30と管理サーバ50との間で、スポーツ動画M、報酬である仮想通貨C及び
サービス情報Iを管理するものであり、スポーツ動画Mは、例えばサッカーの動画である
 一方、仮想通貨Cは、管理サーバ50から第1ユーザ端末20及び第2ユーザ端末30
に付与されるものであって、本実施の形態では、管理サーバ50が管理するサービス情報
Iを第2ユーザ端末30で利用する場合に、第2ユーザ端末30から管理サーバ50に提
供される。
 図2は、第1ユーザ端末20及び第2ユーザ端末30の構成の概略を説明するブロック
図である。図示のように、第1ユーザ端末20及び第2ユーザ端末30はいずれも、本実
施の形態ではスマートフォンによって実装され、アノテーション付与プログラム40、二
次評価プログラム41及び仮想通貨処理プログラム42を備える。
 アノテーション付与プログラム40は、本実施の形態では、動画入力モジュール40a
、受付部であるアノテーション付与モジュール40b、及び送信部である動画送信モジュ
ール40cを備える。
 動画入力モジュール40aは、撮像部であるスマートフォンのカメラによって撮像され
たスポーツ動画Mが入力されるモジュールであり、アノテーション付与モジュール40b
は、動画入力モジュール40aに入力されたスポーツ動画Mのオブジェクトに識別情報で
あるアノテーションを付与する作業を実行するモジュールである。
 図3は、アノテーション付与モジュール40bの処理の概略を説明する図である。図示
のように、アノテーション付与モジュール40bは、スポーツ動画Mのオブジェクトであ
るサッカーのプレイヤーP及びサッカーボールBにアノテーションAを付与して、オブジ
ェクトのラベリングあるいはスポーツ動画Mの抽象化を行う。
 本実施の形態では、例えば、プレイヤーPにアノテーションA1を付与し、プレイヤー
Pの右足にアノテーションA2を付与し、プレイヤーPの左足にアノテーションA3を付
与し、かつサッカーボールBにアノテーションA4を付与する。
 このアノテーションAは、本実施の形態では、スマートフォンの例えばタッチパネル等
の物理的なインターフェースを介して、スポーツ動画Mを構成するフレームごとに個別に
入力される。
 図2で示すように、動画送信モジュール40cは、アノテーションAを付与した作業済
みのスポーツ動画Mを管理サーバ50に送信するモジュールである。
 二次評価プログラム41は、本実施の形態では、スポーツ動画Mのオブジェクトに、ア
ノテーションAが適切に付与されているか否かを、スポーツ動画Mを構成するフレームご
とに二次的に評価するプログラムである。
 この二次評価プログラム41は、例えば、アノテーションAが適切に付与されている場
合は1ポイントを付与するとともにアノテーションAが適切に付与されていない場合はポ
イントを付与しないといった加算方式、あるいはアノテーションAが適切に付与されてい
る場合はポイントを付与しないで、アノテーションAが適切に付与されていない場合にポ
イントを減じるといった減点方式等、種々の評価方式が採用される。
 仮想通貨処理プログラム42は、仮想通貨Cの処理を実行するプログラムであって、本
実施の形態では、管理サーバ50から提供される仮想通貨Cを蓄積するとともに、管理サ
ーバ50に仮想通貨Cを提供する場合に利用リクエストであるリクエストデータdを管理
サーバ50に送信する。
 図4は、管理サーバ50の構成の概略を説明するブロック図である。図示のように、管
理サーバ50は、プロセッサ51、メモリ52、ストレージ53、送受信部54、及び入
出力部55を主要構成として備え、これらが互いにバス56を介して電気的に接続される
 プロセッサ51は、管理サーバ50の動作を制御し、各要素間におけるデータの送受信
の制御や、プログラムの実行に必要な処理等を行う演算装置である。
 このプロセッサ51は、本実施の形態では例えばCPU(Central Proce
ssing Unit)であり、後述するストレージ53に格納されてメモリ52に展開
されたプログラムを実行して各処理を行う。
 メモリ52は、DRAM(Dynamic Random Access Memor
y)等の揮発性記憶装置で構成される主記憶装置、及びフラッシュメモリやHDD(Ha
rd Disc Drive)等の不揮発性記憶装置で構成される補助記憶装置を備える
 このメモリ52は、プロセッサ51の作業領域として使用される一方、制御部21の起
動時に実行されるBIOS(Basic Input/Output System)、
及び各種の設定情報等が格納される。
 ストレージ53は、プログラムや各種の処理に用いられる情報等が格納されている。こ
のストレージ53の構成については、後述する。
 送受信部54は、管理サーバ50をインターネット網等のネットワークに接続するもの
であって、Bluetooth(登録商標)やBLE(Bluetooth Low E
nergy)といった近距離通信インターフェースを具備するものであってもよい。
 入出力部55は、入出力機器が接続されるインターフェースであって、必要に応じてキ
ーボードやマウスといった情報入力機器やディスプレイ等の出力機器が接続される。
 バス56は、接続したプロセッサ51a、メモリ52、ストレージ53、送受信部54
及び入出力部55の間において、例えばアドレス信号、データ信号及び各種の制御信号を
伝達する。
 図5は、ストレージ53の構成の概略を説明するブロック図である。図示のように、ス
トレージ53には、データベース53a、評価プログラム53b、仮想通貨管理プログラ
ム53c、人工知能プログラム53d、動画処理アプリケーション53e、教育アプリケ
ーション53f及び分析アプリケーション53gが格納される。
 本実施の形態では、動画処理アプリケーション53e、教育アプリケーション53f及
び分析アプリケーション53gは、スマートフォンで実装される第1ユーザ端末20及び
第2ユーザ端末30によって実行可能なアプリケーションであって、これら動画処理アプ
リケーション53e、教育アプリケーション53f及び分析アプリケーション53gによ
って、サービス情報Iが構成される。
 データベース53aは、本実施の形態ではストレージ53の記憶領域によって実現され
、第1ユーザ端末20から送信されたスポーツ動画M、及び第2ユーザ端末30から送信
されたアノテーションAを付与した作業済みのスポーツ動画Mが格納される。
 評価プログラム53bは、第2ユーザ端末30から送信されたアノテーションAを付与
した作業済みのスポーツ動画Mのオブジェクトに、アノテーションAが付与されているか
否かを、スポーツ動画Mを構成するフレームごとに評価するプログラムである。
 この評価プログラム53bでは、例えば、スポーツ動画Mを構成する各フレームにアノ
テーションAが存在するか否かを判別することによって評価を行う。
 図6は、仮想通貨管理プログラム53cで実行される処理の概略を説明するブロック図
である。図示のように、仮想通貨管理プログラム53cでは、第1処理S1、第2処理S
2、第3処理S3及び第4処理S4が実行される。
 第1処理S1では、第1ユーザ端末20からスポーツ動画Mが送信されたときに、第1
ユーザ端末20に仮想通貨Cを付与する処理を実行する。
 第2処理S2では、第2ユーザ端末30からアノテーションAを付与した作業済みのス
ポーツ動画Mが送信された場合において、スポーツ動画Mのオブジェクトにアノテーショ
ンAが付与されているか否かの評価がなされたときに、その評価に応じて第2ユーザ端末
30に仮想通貨Cを付与する処理を実行する。
 さらに、第2処理S2では、第2ユーザ端末30からアノテーションAを付与した作業
済みのスポーツ動画Mが送信された場合において、スポーツ動画Mのオブジェクトにアノ
テーションAが適切に付与されているか否かの二次評価がなされたときに、その二次評価
に応じて第2ユーザ端末30に仮想通貨Cを付与する処理を実行する。
 第3処理S3では、スポーツ動画MのオブジェクトにアノテーションAが適切に付与さ
れているか否かの二次評価を行った第2ユーザ端末30に仮想通貨Cを付与する処理を実
行する。
 第4処理S4では、第2ユーザ端末30においてサービス情報Iが利用される際に管理
サーバ50に提供された仮想通貨Cを、第2ユーザ端末30に蓄積された仮想通貨Cから
減算する処理を実行する。
 図5で示すように、人工知能プログラム53dは、データベース53aに格納されるア
ノテーションAを付与した作業済みのスポーツ動画Mを学習データとして機械学習を行い
、学習済みモデルを生成するプログラムである。
 機械学習を行う手法としては、ニューラルネットワーク、ランダムフォレスト、SVM
(support vector machine)等、各種のアルゴリズムが適宜用い
られる。
 図7は、動画処理アプリケーション53eの処理の概略を説明する図である。図7(a
)で示すように、動画処理アプリケーション53eでは、スマートフォンで実装される第
1ユーザ端末20あるいは第2ユーザ端末30のカメラでスポーツ動画Mの撮像を開始し
た時間から任意の時間(例えば3秒)に亘って遡及して撮像する処理E1が実行される。
 一方、動画処理アプリケーション53eでは、図7(b)で示すように、複数の第1ユ
ーザ端末20あるいは第2ユーザ端末30のカメラで撮像されてデータベース53aにそ
れぞれ格納されたスポーツ動画Mに基づいて、複数のアングルからの動画をコマ割にして
同時に第2ユーザ端末30の表示部に表示する処理E2が実行される。
 さらに、動画処理アプリケーション53eでは、図7(c)で示すように、第1ユーザ
端末20あるいは第2ユーザ端末30のカメラで撮像されたスポーツ動画Mを共有するユ
ーザのグループ(例えば「チーム」や「家族」等)を作成して、作成したグループでスポ
ーツ動画Mを共有する処理E3が実行される。
 図8は、教育アプリケーション53fの処理の概略を説明する図である。図8(a)で
示すように、教育アプリケーション53fでは、サッカーの動きや戦術等に関する各種の
問題をテキストTとして第2ユーザ端末30の表示部に表示する。
 一方、教育アプリケーション53fでは、図8(b)で示すように、問題に対する解答
をアニメーション映像Dとして第2ユーザ端末30の表示部に表示する。
 その他、例えばサッカーの各種のフォーメーションについてのアニメーション映像や、
サッカーのトレーニングに関する情報といったサッカーの教育に関する各種のコンテンツ
が準備されて、要望に応じて、第2ユーザ端末30の表示部に表示される。
 図9は、分析アプリケーション53gの処理の概略を説明する図である。図9で示すよ
うに、分析アプリケーション53gでは、人工知能プログラム53dで生成された学習済
みモデルに基づいて、第2ユーザ端末30のカメラで実時間において撮像したスポーツ動
画Mの分析等を行う。
 具体的には、スポーツ動画Mでのプレイヤーの動きやボールの動向等から戦力の分析X
1を行い、プレイヤーごと、あるいはチームの技術習熟度のチェックX2を行ったうえで
、戦略レポートの作成X3を行う。
 次に、本実施の形態のスポーツ動画管理システム10の運用について説明する。
 図1で示すように、まず、第1ユーザ1が、第1ユーザ端末20で撮像したスポーツ動
画Mを管理サーバ50に送信する。これに基づいて、管理サーバ50は、第1ユーザ端末
20に仮想通貨Cを付与する。
 一方、管理サーバ50は、第1ユーザ端末20から送信されたスポーツ動画Mをデータ
ベース53aに格納する一方で、第2ユーザ2aの第2ユーザ端末30に提供して、スポ
ーツ動画MのオブジェクトにアノテーションAを付与する作業を実行するように第2ユー
ザ2aに提案する。
 この提案に基づいて、第2ユーザ2aがスポーツ動画Mのオブジェクトにアノテーショ
ンAを付与する作業を実行し、アノテーションAを付与した作業済みのスポーツ動画Mを
、スポーツ動画Mに行った作業の種別(オブジェクトのラベリングあるいはスポーツ動画
Mの抽象化)と併せて管理サーバ50に送信する。
 管理サーバ50は、第2ユーザ端末30から送信されたスポーツ動画Mをデータベース
53aに格納するとともに、例えば、スポーツ動画Mを構成する各フレームにアノテーシ
ョンAが存在するか否かを判別することによって評価を行う。
 この評価に基づいて、管理サーバ50は、第2ユーザ2aの第2ユーザ端末30に仮想
通貨Cを付与する。
 一方、管理サーバ50は、第2ユーザ2aの第2ユーザ端末30から送信されたアノテ
ーションAを付与した作業済みのスポーツ動画Mを、第2ユーザ2bの第2ユーザ端末3
0に提供して、スポーツ動画MのオブジェクトにアノテーションAが適切に付与されてい
るか否かの二次的な評価を行うように第2ユーザ2bに提案する。
 この提案に基づいて、第2ユーザ2bが二次評価を実行し、その二次評価を管理サーバ
50に送信すると、管理サーバ50はその二次評価に基づいて第2ユーザ2aの第2ユー
ザ端末30に仮想通貨Cを付与するとともに、第2ユーザ2bの第2ユーザ端末30にも
仮想通貨Cを付与する。
 一方、第2ユーザ2nが第2ユーザ端末30でサービス情報Iを利用する場合は、第2
ユーザ2nの第2ユーザ端末30から管理サーバ50に仮想通貨Cを提供してリクエスト
データdを管理サーバ50に送信する。
 これにより、第2ユーザ2nの第2ユーザ端末30において、サービス情報Iを構成す
る動画処理アプリケーション53e、教育アプリケーション53f及び分析アプリケーシ
ョン53gを利用することが可能となる。
 このように、管理サーバ50で管理するサービス情報Iを利用することができる仮想通
貨Cを、複数の第2ユーザ2a~2nの第2ユーザ端末30に付与することによって、第
1ユーザ1によって管理サーバ50に送信されたスポーツ動画Mのオブジェクトに、アノ
テーションAを付与するインセンティブを与えることができる。
 したがって、スポーツ動画Mに対するアノテーションAの付与作業を効率的に行うこと
ができる。
 なお、本発明は上記実施の形態に限定されることはなく、発明の趣旨を逸脱しない範囲
で種々の変更が可能である。上記実施の形態では、第1ユーザ1によって管理サーバ50
に送信されたスポーツ動画Mのオブジェクトに第2ユーザ2aがアノテーションAを付与
する場合を説明したが、第2ユーザ2a~2nが自ら第2ユーザ端末30で撮像したスポ
ーツ動画MにアノテーションAを付与するものであってもよい。
 さらに、第1ユーザ1が第1ユーザ端末20で撮像したスポーツ動画Mに、第1ユーザ
1が自ら第1ユーザ端末20を用いてアノテーションAを付与するものであってもよい。
 上記実施の形態では、動画処理アプリケーション53e、教育アプリケーション53f
及び分析アプリケーション53gによってサービス情報Iが構成される場合を説明したが
、これ以外のアプリケーションによってサービス情報Iが構成されるものであってもよい
 本実施の形態によるアノテーション作業やその評価等、ユーザが行う作業や操作に対す
る報酬として仮想通貨の例を挙げていたが、本発明による報酬はこれに限られない。例え
ば、システム事業者又は事業者が指定する他の事業者が発行するポイント、マイル、コイ
ン、クーポン等、仮想的に発行された通貨と経済的に同視できるものも広く含めることが
できる。また、このよう仮想通貨を媒介として、システムやシステムが提供するサービス
やソフトウェアを使用する権利も含めることができる。これにより、ユーザによる作業の
蓄積によって充実したシステムをユーザたちが使用することが可能となり、持続的な拡大
・最適化を促すことができる。
1  第1ユーザ
2a~2n  第2ユーザ
10  スポーツ動画管理システム
20  第1ユーザ端末
30  第2ユーザ端末
40  アノテーション付与プログラム
40b  アノテーション付与モジュール(受付部)
40c  動画送信モジュール(送信部)
41  二次評価プログラム
50  管理サーバ
53b  評価プログラム
53d  人工知能プログラム
53e  動画処理アプリケーション
53f  教育アプリケーション
53g  分析アプリケーション
A  アノテーション(識別情報)
C  仮想通貨(報酬)
I  サービス情報
M  スポーツ動画
d  リクエストデータ(利用リクエスト)

Claims (4)

  1.  第1ユーザ端末、第2ユーザ端末及びこれらとネットワークを通じて通信可能な管理サ
    ーバを備え、スポーツ動画への所定の作業によって所定の報酬を付与するスポーツ動画管
    理システムであって、
     前記第1ユーザ端末は、
     前記スポーツ動画を前記管理サーバに送信し、
     前記管理サーバは、
     受信した前記スポーツ動画を前記第2ユーザ端末に提供するとともに、前記スポーツ動
    画内のオブジェクトに対して所定の識別情報を付与する作業を行わせるように促し、
     前記作業がされた作業済みスポーツ動画に基づいて、前記第2ユーザ端末による前記作
    業を評価し、
     前記評価に応じて前記第2ユーザ端末に報酬を付与し、
     前記第2ユーザ端末に対して、利用可能な複数のサービス情報を提供し、
     前記第2ユーザ端末は、
     前記報酬を支払うことにより前記サービス情報にかかるサービスの利用リクエストを前
    記管理サーバに送信する、
     スポーツ動画管理システム。
  2.  請求項1に記載のスポーツ動画管理システムであって、
     前記第2ユーザ端末は、
     前記スポーツ動画を第2ユーザ端末に提示して、当該スポーツ動画の評価及び分析、当
    該スポーツ動画に含まれるオブジェクトのラベリングまたは当該スポーツ動画の抽象化の
    少なくともいずれかの作業を行わせ、当該作業の種別と作業結果とを前記管理サーバに送
    信する、
     スポーツ動画管理システム。
  3.  請求項2に記載のスポーツ動画管理システムであって、
     前記第2ユーザ端末は、
     前記スポーツ動画を撮像する撮像部、
     撮像した前記スポーツ動画に対して前記作業を受け付ける受付部、
     前記作業済スポーツ動画を前記管理サーバに送信する送信部、
     を備えるスポーツ動画管理システム。
  4.  請求項1~3のいずれか1項に記載のスポーツ動画管理システムであって、
     前記管理サーバは、
     一の第2ユーザ端末から受信した前記作業済スポーツ動画を他の第2ユーザ端末に送信
    して前記作業の内容に関する二次評価を送信させ、
     前記二次評価に応じて前記第2ユーザ端末に報酬を付与する、
     スポーツ動画管理システム。
PCT/JP2020/022703 2019-06-10 2020-06-09 スポーツ動画管理システム WO2020250891A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019107695A JP2022116369A (ja) 2019-06-10 2019-06-10 スポーツ動画管理システム
JP2019-107695 2019-06-10

Publications (1)

Publication Number Publication Date
WO2020250891A1 true WO2020250891A1 (ja) 2020-12-17

Family

ID=73781439

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/022703 WO2020250891A1 (ja) 2019-06-10 2020-06-09 スポーツ動画管理システム

Country Status (2)

Country Link
JP (1) JP2022116369A (ja)
WO (1) WO2020250891A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0222173B2 (ja) * 1983-06-30 1990-05-17 Toto Ltd
JP2012248070A (ja) * 2011-05-30 2012-12-13 Sony Corp 情報処理装置、メタデータ設定方法、及びプログラム
JP2018106662A (ja) * 2016-12-22 2018-07-05 キヤノン株式会社 情報処理装置、情報処理方法、プログラム
WO2019003485A1 (ja) * 2017-06-30 2019-01-03 株式会社Abeja 機械学習又は推論のための計算機システム及び方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0222173B2 (ja) * 1983-06-30 1990-05-17 Toto Ltd
JP2012248070A (ja) * 2011-05-30 2012-12-13 Sony Corp 情報処理装置、メタデータ設定方法、及びプログラム
JP2018106662A (ja) * 2016-12-22 2018-07-05 キヤノン株式会社 情報処理装置、情報処理方法、プログラム
WO2019003485A1 (ja) * 2017-06-30 2019-01-03 株式会社Abeja 機械学習又は推論のための計算機システム及び方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
ALEXANDER SOROKIN ET AL.: "Utility data annotation with Amazon Mechanical Turk", 2008 IEEE : COMPUTER SOCIETY CONFERENCE ON COMPUTER VISION AND PATTERN RECOGNITION WORKSHOPS, 15 July 2008 (2008-07-15), pages 1 - 8, XP031285509, ISSN: 2160-7508 *
FUJISAWA, KAZUKI, CURATION SYSTEM FOR VIDEO STREAMS CAPTURED BY MULTIPLE CAMERAS TARGETING SPORT GAMES, 14 March 2016 (2016-03-14), pages 1 - 56, Retrieved from the Internet <URL:https://library.naist.jp/mylimedio/dllimedio/showpdf2.cgi/DLPDFR012641-P1-67> [retrieved on 20200821] *
YOSHIKAWA, YUYA: "Constructing a Large-Scale Video Dataset for Human Action Recognition at Home and Office", CONSTRUCTING A LARGE-SCALE VIDEO DATASET FOR HUMAN ACTION RECOGNITION AT HOME AND OFFICE, 2017, pages 1 - 4, XP055770705, Retrieved from the Internet <URL:https://www.ai-gakkai.or.jp/jsai2017/webprogram/2017/pdf/230.pdf> [retrieved on 20200821] *

Also Published As

Publication number Publication date
JP2022116369A (ja) 2022-08-10

Similar Documents

Publication Publication Date Title
WO2020192469A1 (zh) 图像语义分割网络的训练方法、装置、设备及存储介质
Ortega et al. Dmd: A large-scale multi-modal driver monitoring dataset for attention and alertness analysis
US10810895B2 (en) Facial expression recognition in educational learning systems
Han et al. Examining young children’s perception toward augmented reality-infused dramatic play
CN105103542B (zh) 手持型便携式光学扫描仪和使用的方法
CN102609954B (zh) 对人类目标跟踪的确认分析
US8206222B2 (en) Entertainment system for performing human intelligence tasks
JP7030078B2 (ja) 端末装置に適用される情報生成方法および装置
CN102253712A (zh) 用于共享信息的识别系统
CN103137046A (zh) 用于交互式广告的使用测量技术和系统
CN106796696A (zh) 基于凝视信息的朝向刺激的关注的确定
EP0847201B1 (fr) Système de suivi de mobiles en temps réel sur un terrain de sports
CN115933868B (zh) 翻转讲台的立体综合教学场系统及其工作方法
CN113870395A (zh) 动画视频生成方法、装置、设备及存储介质
Zabulis et al. Multicamera human detection and tracking supporting natural interaction with large-scale displays
CN104598027B (zh) 一种基于用户行为分析的体感控制多媒体培训系统
US20230082953A1 (en) System and Method for Real-Time Interaction and Coaching
Zilly et al. The ai driving olympics at neurips 2018
CN106375682A (zh) 影像处理方法、装置与可移动设备、无人机遥控器及系统
CN110427864B (zh) 一种图像处理方法、装置及电子设备
Singh et al. Fast and robust video-based exercise classification via body pose tracking and scalable multivariate time series classifiers
WO2020250891A1 (ja) スポーツ動画管理システム
Dimitriadou et al. Using Student Action Recognition to Enhance the Efficiency of Tele-education.
CN113784059A (zh) 用于服装生产的视频生成与拼接方法、设备及存储介质
CN116029371A (zh) 基于预训练的联邦学习工作流构建方法及相关设备

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20821753

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20821753

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP