JP6848036B1

JP6848036B1 - Information providing device, information providing method, and program

Info

Publication number: JP6848036B1
Application number: JP2019218257A
Authority: JP
Inventors: 和久直井
Original assignee: Rakuten Inc
Current assignee: Rakuten Group Inc
Priority date: 2019-12-02
Filing date: 2019-12-02
Publication date: 2021-03-24
Anticipated expiration: 2039-12-02
Also published as: JP2021089488A

Abstract

【課題】競技会場に来場しているユーザの端末に、競技体についての有用な情報を提供することのできる情報提供装置等を提供する。【解決手段】取得部２１０は、ユーザ端末にて撮影された競走馬についての撮影画像を、ユーザ端末から取得する。特定部２３０は、取得された撮影画像に基づいて、競走馬を特定する。解析部２５０は、特定された競走馬を公式に撮影したパドック画像が含まれる入力データを解析し、競走馬についてのスコア値を導出する。そして、提供部２６０は、導出されたスコア値をユーザ端末へ提供し、撮影画像を表示するユーザ端末の表示部に、スコア値を重畳して表示させる。【選択図】図３PROBLEM TO BE SOLVED: To provide an information providing device or the like capable of providing useful information about a competition body to a terminal of a user who is visiting the competition venue. An acquisition unit 210 acquires a photographed image of a racehorse photographed by a user terminal from the user terminal. The identification unit 230 identifies the racehorse based on the acquired captured image. The analysis unit 250 analyzes the input data including the paddock image obtained by officially photographing the specified racehorse, and derives the score value for the racehorse. Then, the providing unit 260 provides the derived score value to the user terminal, and superimposes and displays the score value on the display unit of the user terminal that displays the captured image. [Selection diagram] Fig. 3

Description

本発明は、情報提供装置、情報提供方法、ならびに、プログラムに関する。 The present invention relates to an information providing device, an information providing method, and a program.

従来より、競馬、競輪、競艇といった公営競技において、レース（競技走）の投票券を、インターネット等を通じてユーザ端末から購入できる情報処理システムが活用されている。この情報処理システムでは、競技体（競走馬等）の着順等を予想して投票券を購入するユーザのために、レースに出場する競技体について、種々の情報をユーザ端末に提供している。
例えば、競馬に活用されている情報処理システムでは、レース前にパドック内の競走馬を撮影したパドック画像（一例として、動画像）を、ユーザ端末から視聴できるようになっている。つまり、ユーザは、パドック画像を視聴しつつ、競走馬のコンディションを推察した上で、所望の投票券（勝馬投票券）を購入することが可能となっている。 Conventionally, in public competitions such as horse racing, bicycle racing, and boat racing, an information processing system that allows a race (race running) voting ticket to be purchased from a user terminal via the Internet or the like has been used. This information processing system provides various information about the competitions participating in the race to the user terminal for the user who purchases the voting ticket in anticipation of the order of arrival of the competitions (racehorses, etc.). ..
For example, in an information processing system used for horse racing, a paddock image (for example, a moving image) of a racehorse in the paddock can be viewed from a user terminal before the race. That is, the user can purchase a desired voting ticket (winning horse voting ticket) after inferring the condition of the racehorse while viewing the paddock image.

ところで、パドック画像から競走馬のコンディションを正しく推察できるようになるまでには、ある程度の経験と技術が必要となる。そのため、初心者等を含めたユーザの多くは、パドック画像を視聴しても、そこに映る競走馬のコンディションについて、良いのか悪いのか、ほとんど判断がつかないというのが実状であった。 By the way, some experience and skill are required before the condition of a racehorse can be correctly inferred from the paddock image. Therefore, many users, including beginners, can hardly judge whether the condition of the racehorse reflected in the paddock image is good or bad even if they watch the paddock image.

このようなことから、例えば、特許文献１には、パドック画像において注目すべきポイントを提示することのできる情報処理システム（情報処理装置）の発明が開示されている。
この特許文献１の発明では、同文献中の図６等にて示されるように、パドック画像（パドック動画）において、競走馬に応じた注目ポイント（耳の状態、尾の状態、及び、歩行位置等）の情報を提示している。 For this reason, for example, Patent Document 1 discloses an invention of an information processing system (information processing apparatus) capable of presenting notable points in a paddock image.
In the invention of Patent Document 1, as shown in FIG. 6 and the like in the same document, in the paddock image (paddock moving image), attention points (ear state, tail state, and walking position) according to the racehorse are used. Etc.) information is presented.

特許第５８０１９８５号公報Japanese Patent No. 5801985

上述した特許文献１の発明では、システム側に記録された過去のパドック画像に、注目ポイントの情報を重畳させた画像を、ユーザ端末から視聴できるようになっている。そのため、例えば、ユーザが競馬場に来場しており、実際のパドックで競走馬の実物を視察できる状況であっても、あえてユーザ端末からそのようなパドック画像を視聴する必要があった。
また、実際のパドックにおいて、ユーザは、レースに出場する全ての競走馬を視察する訳ではなく、例えば、関心のある競走馬を数頭程度まで絞って視察する場合が多い。
それでも、特許文献１の発明で視聴されるようなパドック画像では、全ての競走馬が漏れなく公平に撮影されており、個々の競走馬が映る時間はそれほど長くない。そのため、パドック画像に関心のある競走馬が映り、提示される注目ポイントの情報と共にその競走馬を注意深く視察している途中で、他の競走馬（関心のない競走馬等）に切り替わってしまう場合もあった。そのような場合、競馬場に来場しているユーザは、目の前に関心のある競走馬が居続けているにも拘わらず、有用な情報が得られないことに、不満を感じることになる。 In the invention of Patent Document 1 described above, an image in which information on a point of interest is superimposed on a past paddock image recorded on the system side can be viewed from a user terminal. Therefore, for example, even in a situation where a user is visiting a racetrack and can inspect the actual racehorse in an actual paddock, it is necessary to dare to view such a paddock image from the user terminal.
Further, in an actual paddock, the user does not inspect all the racehorses participating in the race, but in many cases, for example, only a few racehorses of interest are inspected.
Even so, in the paddock image as viewed in the invention of Patent Document 1, all the racehorses are photographed fairly without omission, and the time for each racehorse to be shown is not so long. Therefore, when a racehorse of interest is reflected in the paddock image, and while carefully inspecting the racehorse with the information of the point of interest to be presented, the racehorse is switched to another racehorse (racehorse of no interest, etc.). There was also. In such a case, the user who is visiting the racetrack will be dissatisfied with the lack of useful information even though the racehorse of interest remains in front of him.

このようなことから、競技会場（競馬場等）に来場し、競技体の実物を視察できる状況下にあるユーザに対して、競技体についての有用な情報を提供することのできる技術が求められていた。 For this reason, there is a need for technology that can provide useful information about the competition to users who come to the competition venue (racetrack, etc.) and are in a situation where they can inspect the actual competition. Was there.

本発明は、上記実状に鑑みてなされたもので、競技会場に来場しているユーザの端末に、競技体についての有用な情報を提供することのできる情報提供装置、情報提供方法、ならびに、プログラムを提供することを目的とする。 The present invention has been made in view of the above circumstances, and is an information providing device, an information providing method, and a program capable of providing useful information about a competition body to a terminal of a user who is visiting the competition venue. The purpose is to provide.

本発明の第１の観点に係る情報提供装置は、
競技走に出場する競技体についての情報をユーザ端末に提供する情報提供装置であって、
前記ユーザ端末にて撮影された前記競技体についての撮影画像を、前記ユーザ端末から取得する取得部と、
取得された前記撮影画像に基づいて、前記競技体を特定する特定部と、
特定された前記競技体を公式に撮影した公式撮影画像が含まれる入力データを解析し、前記競技体についてのスコア値を導出する解析部と、
導出された前記スコア値を前記ユーザ端末へ提供し、前記撮影画像を表示する前記ユーザ端末の表示部に、前記スコア値を重畳して表示させる提供部と、
を備えることを特徴とする。 The information providing device according to the first aspect of the present invention is
It is an information providing device that provides information about the competitors participating in the competition run to the user terminal.
An acquisition unit that acquires a photographed image of the competition body photographed by the user terminal from the user terminal, and
Based on the acquired captured image, a specific part that identifies the competition body and
An analysis unit that analyzes input data including officially photographed images of the identified athlete and derives a score value for the athlete.
A providing unit that provides the derived score value to the user terminal and displays the score value superimposed on the display unit of the user terminal that displays the captured image.
It is characterized by having.

また、上記観点に係る情報提供装置において、
前記取得部は、前記競技走の開始前において、前記ユーザ端末でリアルタイムに撮影された前記撮影画像を、前記ユーザ端末から取得し、
前記解析部は、前記競技走の開始前に撮影された前記公式撮影画像、及び、前記競技走についての詳細情報が含まれる入力データを、所定の学習済モデルに入力することで前記スコア値を導出するようにしてもよい。 In addition, in the information providing device related to the above viewpoint,
The acquisition unit acquires the captured image captured in real time by the user terminal from the user terminal before the start of the competition run.
The analysis unit inputs the officially captured image taken before the start of the competition run and input data including detailed information about the competition run into a predetermined trained model to obtain the score value. It may be derived.

また、上記観点に係る情報提供装置において、
前記学習済モデルは、過去の前記競技走における、前記公式撮影画像及び前記詳細情報と、前記競技走の結果を示す結果情報とが対応付けられた学習データによって、予め学習されていてもよい。 In addition, in the information providing device related to the above viewpoint,
The learned model may be learned in advance by learning data in which the official photographed image and the detailed information in the past competition run are associated with the result information indicating the result of the competition run.

また、上記観点に係る情報提供装置は、
前記取得部が取得した前記撮影画像を更に含んだ前記学習データを用いて、前記学習済モデルを追加学習させる追加学習部を更に備えてもよい。 In addition, the information providing device related to the above viewpoint is
An additional learning unit for additionally learning the trained model may be further provided by using the learning data further including the captured image acquired by the acquisition unit.

また、上記観点に係る情報提供装置は、
前記競技体において注目すべき箇所と当該箇所の状態とを含む注目情報を、前記ユーザ端末から受け付ける受付部と、
前記受付部が受け付けた前記注目情報を更に含んだ前記学習データを用いて、前記学習済モデルを追加学習させる追加学習部と、を更に備えてもよい。 In addition, the information providing device related to the above viewpoint is
A reception unit that receives attention information including a noteworthy part in the competition body and the state of the part from the user terminal, and a reception unit.
An additional learning unit for additionally learning the trained model by using the learning data further including the attention information received by the reception unit may be further provided.

本発明の第２の観点に係る情報提供方法は、
競技走に出場する競技体についての情報をユーザ端末に提供する情報提供装置における情報提供方法であって、
前記情報提供装置が、前記ユーザ端末にて撮影された前記競技体についての撮影画像を、前記ユーザ端末から取得する取得ステップと、
前記情報提供装置が、取得された前記撮影画像に基づいて、前記競技体を特定する特定ステップと、
前記情報提供装置が、特定された前記競技体を公式に撮影した公式撮影画像が含まれる入力データを解析し、前記競技体についてのスコア値を導出する解析ステップと、
前記情報提供装置が、導出された前記スコア値を前記ユーザ端末へ提供し、前記撮影画像を表示する前記ユーザ端末の表示部に、前記スコア値を重畳して表示させる提供ステップと、
を備えることを特徴とする。 The information providing method according to the second aspect of the present invention is
It is an information providing method in an information providing device that provides information about a competitor participating in a competition run to a user terminal.
An acquisition step in which the information providing device acquires a photographed image of the competition body photographed by the user terminal from the user terminal.
A specific step in which the information providing device identifies the athlete based on the acquired captured image, and
An analysis step in which the information providing device analyzes input data including an officially photographed image of the specified athlete, and derives a score value for the athlete.
A providing step in which the information providing device provides the derived score value to the user terminal, and the score value is superimposed and displayed on the display unit of the user terminal displaying the captured image.
It is characterized by having.

本発明の第３の観点に係るプログラムは、
競技走に出場する競技体についての情報をユーザ端末に提供するコンピュータを、
前記ユーザ端末にて撮影された前記競技体についての撮影画像を、前記ユーザ端末から取得する取得部、
取得された前記撮影画像に基づいて、前記競技体を特定する特定部、
特定された前記競技体を公式に撮影した公式撮影画像が含まれる入力データを解析し、前記競技体についてのスコア値を導出する解析部、
導出された前記スコア値を前記ユーザ端末へ提供し、前記撮影画像を表示する前記ユーザ端末の表示部に、前記スコア値を重畳して表示させる提供部、
として機能させることを特徴とする。 The program according to the third aspect of the present invention
A computer that provides the user terminal with information about the competitors participating in the competition.
An acquisition unit that acquires a photographed image of the competition body photographed by the user terminal from the user terminal.
A specific part that identifies the athlete based on the acquired captured image,
An analysis unit that analyzes input data including officially photographed images of the identified athlete and derives a score value for the athlete.
A providing unit that provides the derived score value to the user terminal and superimposes and displays the score value on the display unit of the user terminal that displays the captured image.
It is characterized by functioning as.

上記プログラムは、当該プログラムが実行されるコンピュータとは独立して、コンピュータ通信網を介して配布・販売することができる。
更に、上記プログラムを記録する情報記録媒体は、非一時的な（non-transitory）記録媒体であり、コンピュータとは独立して配布・販売することができる。ここで、非一時的な記録媒体とは、有形な（tangible）記録媒体をいう。非一時的な記録媒体は、例えば、コンパクトディスク、フレキシブルディスク、ハードディスク、光磁気ディスク、ディジタルビデオディスク、磁気テープ、半導体メモリ等である。また、一時的な（transitory）記録媒体とは、伝送媒体（伝搬信号）それ自体を示す。一時的な記録媒体は、例えば、電気信号、光信号、電磁波等である。なお、一時的な（temporary）記憶領域とは、データやプログラムを一時的に記憶するための領域であり、例えば、ＲＡＭ（Random Access Memory）等の揮発性メモリである。 The above program can be distributed and sold via a computer communication network independently of the computer on which the program is executed.
Further, the information recording medium for recording the above program is a non-transitory recording medium, and can be distributed and sold independently of the computer. Here, the non-temporary recording medium means a tangible recording medium. Non-temporary recording media include, for example, compact discs, flexible discs, hard disks, magneto-optical discs, digital video discs, magnetic tapes, semiconductor memories, and the like. Further, the transient recording medium refers to the transmission medium (propagation signal) itself. The temporary recording medium is, for example, an electric signal, an optical signal, an electromagnetic wave, or the like. The temporary storage area is an area for temporarily storing data or a program, and is, for example, a volatile memory such as a RAM (Random Access Memory).

本発明によれば、競技会場に来場しているユーザの端末に、競技体についての有用な情報を提供することができる。 According to the present invention, it is possible to provide useful information about a competition body to a terminal of a user who is visiting the competition venue.

本実施形態に係る情報処理システムの全体構成の一例を示すブロック図である。It is a block diagram which shows an example of the whole structure of the information processing system which concerns on this embodiment. 本実施形態に係る情報提供装置等が実現される典型的な情報処理装置の概要構成の一例を示すブロック図である。It is a block diagram which shows an example of the outline structure of the typical information processing apparatus which realizes the information providing apparatus and the like which concerns on this Embodiment. 本実施形態に係る情報提供装置の機能構成の一例を示すブロック図である。It is a block diagram which shows an example of the functional structure of the information providing apparatus which concerns on this embodiment. 撮影画像の一例を示す模式図である。It is a schematic diagram which shows an example of the photographed image. 競走馬情報の一例を示す模式図である。It is a schematic diagram which shows an example of a racehorse information. 騎手情報の一例を示す模式図である。It is a schematic diagram which shows an example of jockey information. レース情報の一例を示す模式図である。It is a schematic diagram which shows an example of a race information. 学習済モデルを説明するための模式図である。It is a schematic diagram for explaining a trained model. スコア値が重畳された撮影画像の一例を示す模式図である。It is a schematic diagram which shows an example of the photographed image which the score value was superposed. 本実施形態に係る情報提供処理を説明するためのフローチャートである。図である。It is a flowchart for demonstrating the information provision process which concerns on this Embodiment. It is a figure.

以下に本発明の実施形態を説明する。本発明の実施形態では、公営競技の１つである競馬において、馬券（勝馬投票券）を購入するために有用となる情報をユーザ端末へ提供する情報処理システムについて説明するが、このような競馬に限られず、後述するように、競輪、競艇といった他の公営競技において、有用な情報を提供する情報処理システムにおいても、同様に適用可能である。
なお、以下の実施形態は説明のためのものであり、本願発明の範囲を制限するものではない。したがって、当業者であればこれらの各要素または全要素をこれと均等なものに置換した実施形態を採用することが可能であるが、これらの実施形態も本発明の範囲に含まれる。 An embodiment of the present invention will be described below. In the embodiment of the present invention, an information processing system that provides information useful for purchasing a betting ticket (winning horse betting ticket) to a user terminal in horse racing, which is one of public competitions, will be described. As will be described later, the application is similarly applicable to an information processing system that provides useful information in other public competitions such as bicycle races and boat races.
The following embodiments are for illustration purposes only and do not limit the scope of the present invention. Therefore, those skilled in the art can adopt embodiments in which each or all of these elements are replaced with equivalent ones, but these embodiments are also included in the scope of the present invention.

（全体構成）
本発明の実施形態に係る情報処理システム１００は、例えば、馬券を購入するために有用となる情報をユーザに提供するシステムであり、図１に示すように、情報提供装置２００と、ユーザ端末３００とを含んで構成される。そして、情報提供装置２００と、ユーザ端末３００とは、インターネット９００を介して通信可能に接続されている。
なお、図１には、ユーザ端末３００を３台だけ示しているが、発明の理解を容易にするためであり、実際には、ユーザ数に応じて、膨大な数のユーザ端末３００が含まれているものとする。 (overall structure)
The information processing system 100 according to the embodiment of the present invention is, for example, a system that provides a user with information useful for purchasing a betting ticket. As shown in FIG. 1, an information providing device 200 and a user terminal 300 are provided. It is composed including and. The information providing device 200 and the user terminal 300 are connected to each other so as to be able to communicate with each other via the Internet 900.
Although only three user terminals 300 are shown in FIG. 1, this is for facilitating the understanding of the invention, and in reality, a huge number of user terminals 300 are included depending on the number of users. It is assumed that

情報提供装置２００は、例えば、ユーザに馬券を販売するためのサーバ装置であり、馬券の販売に際して、有用となる情報をユーザ端末３００に提供する。一例として、情報提供装置２００は、後述するように、過去のレース（競技走）について、競走馬が映るパドック画像及びレース結果を示す結果情報を含む学習データを用いて学習した学習済モデルを構築している。そして、情報提供装置２００は、レースの開始前に、当日のパドック画像を含む入力データを学習済モデルに入力することで、競走馬のスコア値を導出する。情報提供装置２００は、導出したスコア値を、ユーザ端末３００に提供する。
なお、競馬場（競技会場）には、パドック等に複数の固定カメラが設置されており、情報提供装置２００は、例えば、専用回線等を介して、固定カメラが撮影したパドック画像（公式撮影画像）を取得できるようになっている。
また、情報提供装置２００は、このような有用な情報をユーザ端末３００に提供するだけでなく、ユーザ端末３００からの操作に応じて、所望の馬券を販売する販売処理や、購入した馬券が的中した場合に、その馬券に対する払い戻し処理等も行う。 The information providing device 200 is, for example, a server device for selling a betting ticket to a user, and provides useful information to the user terminal 300 when selling the betting ticket. As an example, as will be described later, the information providing device 200 constructs a learned model in which a past race (race run) is learned using learning data including a paddock image showing a racehorse and result information showing the race result. are doing. Then, the information providing device 200 derives the score value of the racehorse by inputting the input data including the paddock image of the day into the trained model before the start of the race. The information providing device 200 provides the derived score value to the user terminal 300.
In the racetrack (competition venue), a plurality of fixed cameras are installed in a paddock or the like, and the information providing device 200 uses, for example, a paddock image (officially photographed image) taken by the fixed camera via a dedicated line or the like. ) Can be obtained.
Further, the information providing device 200 not only provides such useful information to the user terminal 300, but also sells a desired betting ticket in response to an operation from the user terminal 300, or purchases a betting ticket. In case of a loss, refund processing for the betting ticket will also be performed.

ユーザ端末３００は、例えば、カメラ等の撮影部を備えたスマートフォンやタブレット等であり、情報処理システム１００を利用するユーザによって使用される。
例えば、ユーザ端末３００は、競馬場に来場しているユーザにも使用される。つまり、ユーザは、パドック等でユーザ端末３００を使用することが可能となっている。なお、ユーザ端末３００には、一例として、情報処理システム１００を利用するための専用アプリ（アプリケーション）がインストールされている場合について説明するが、他に、汎用のブラウザ等から、情報提供装置２００へアクセス可能であってもよい。
すなわち、競馬場に来場しているユーザがユーザ端末３００で専用アプリを起動させ、ログイン等を行うことで、ユーザ端末３００から情報提供装置２００へアクセス可能となり、情報提供装置２００が提供する種々のサービスを受けることが可能となる。例えば、後述するように、レース前に、パドック内の何れかの競走馬を、ユーザ端末３００（撮影部）から撮影することで、その競走馬についての現時点における解析結果となるスコア値を得ることができる。 The user terminal 300 is, for example, a smartphone or tablet provided with a photographing unit such as a camera, and is used by a user who uses the information processing system 100.
For example, the user terminal 300 is also used by a user who is visiting the racetrack. That is, the user can use the user terminal 300 in a paddock or the like. As an example, a case where a dedicated application (application) for using the information processing system 100 is installed in the user terminal 300 will be described. In addition, from a general-purpose browser or the like to the information providing device 200. It may be accessible.
That is, when a user who is visiting the racetrack activates a dedicated application on the user terminal 300 and logs in or the like, the information providing device 200 can be accessed from the user terminal 300, and various types of information providing devices 200 provide. You will be able to receive the service. For example, as will be described later, by photographing any racehorse in the paddock from the user terminal 300 (shooting unit) before the race, a score value that is the analysis result at the present time for the racehorse can be obtained. Can be done.

（情報処理装置の概要構成）
本実施形態に係る情報提供装置２００等が実現される典型的な情報処理装置４００について説明する。 (Outline configuration of information processing device)
A typical information processing device 400 in which the information providing device 200 and the like according to the present embodiment are realized will be described.

情報処理装置４００は、図２に示すように、ＣＰＵ（Central Processing Unit）４０１と、ＲＯＭ（Read Only Memory）４０２と、ＲＡＭ（Random Access Memory）４０３と、ＮＩＣ（Network Interface Card）４０４と、画像処理部４０５と、音声処理部４０６と、補助記憶部４０７と、インターフェース４０８と、操作ユニット４０９と、表示ユニット４１０と、スピーカ４１１と、を備える。 As shown in FIG. 2, the information processing device 400 includes a CPU (Central Processing Unit) 401, a ROM (Read Only Memory) 402, a RAM (Random Access Memory) 403, a NIC (Network Interface Card) 404, and an image. It includes a processing unit 405, a voice processing unit 406, an auxiliary storage unit 407, an interface 408, an operation unit 409, a display unit 410, and a speaker 411.

ＣＰＵ４０１は、情報処理装置４００全体の動作を制御し、各構成要素と接続され制御信号やデータをやりとりする。 The CPU 401 controls the operation of the entire information processing device 400, is connected to each component, and exchanges control signals and data.

ＲＯＭ４０２には、電源投入直後に実行されるＩＰＬ（Initial Program Loader）が記録され、これが実行されることにより、補助記憶部４０７に記憶されたプログラムをＲＡＭ４０３に読み出してＣＰＵ４０１による当該プログラムの実行が開始される。 An IPL (Initial Program Loader) executed immediately after the power is turned on is recorded in the ROM 402, and when this is executed, the program stored in the auxiliary storage unit 407 is read into the RAM 403 and the CPU 401 reads the program. Execution starts.

ＲＡＭ４０３は、データやプログラムを一時的に記憶するためのもので、補助記憶部４０７から読み出されたプログラムやデータ、その他、通信に必要なデータ等が保持される。 The RAM 403 is for temporarily storing data and programs, and holds programs and data read from the auxiliary storage unit 407, and other data necessary for communication.

ＮＩＣ４０４は、情報処理装置４００をインターネット等のコンピュータ通信網に接続するためのものであり、ＬＡＮ（Local Area Network）を構成する際に用いられる１０ＢＡＳＥ−Ｔ／１００ＢＡＳＥ−Ｔ規格にしたがうものや、電話回線を用いてインターネットに接続するためのアナログモデム、ＩＳＤＮ（Integrated Services Digital Network）モデム、ＡＤＳＬ（Asymmetric Digital Subscriber Line）モデム、ケーブルテレビジョン回線を用いてインターネットに接続するためのケーブルモデム等から構成される。 The NIC 404 is for connecting the information processing device 400 to a computer communication network such as the Internet, and conforms to the 10BASE-T / 100BASE-T standard used when constructing a LAN (Local Area Network), or Consists of an analog modem for connecting to the Internet using a telephone line, an ISDN (Integrated Services Digital Network) modem, an ADSL (Asymmetric Digital Subscriber Line) modem, a cable modem for connecting to the Internet using a cable television line, etc. Will be done.

画像処理部４０５は、補助記憶部４０７等から読み出された画像データをＣＰＵ４０１や画像処理部４０５が備える画像演算プロセッサ（図示せず）によって加工処理した後、これを画像処理部４０５が備えるフレームメモリ（図示せず）に記録する。フレームメモリに記録された画像情報は、所定の同期タイミングでビデオ信号に変換され、インターフェース４０８等を介して表示ユニット４１０に出力される。つまり、画像処理部４０５は、ＣＰＵ４０１の制御の下、情報処理装置４００が行う処理の進行の中で必要となる画像を生成し、その画像を表示ユニット４１０に表示させる。 The image processing unit 405 processes the image data read from the auxiliary storage unit 407 or the like by an image calculation processor (not shown) included in the CPU 401 or the image processing unit 405, and then the image processing unit 405 includes the image data. Record in frame memory (not shown). The image information recorded in the frame memory is converted into a video signal at a predetermined synchronization timing and output to the display unit 410 via the interface 408 or the like. That is, the image processing unit 405 generates an image necessary for the progress of the processing performed by the information processing device 400 under the control of the CPU 401, and displays the image on the display unit 410.

音声処理部４０６は、補助記憶部４０７等から読み出された音声データを音声信号に変換し、インターフェース４０８を介してスピーカ４１１に出力する。つまり、音声処理部４０６は、ＣＰＵ４０１の制御の下、情報処理装置４００が行う処理の進行の中で発生させるべき音声を生成し、その音声をスピーカ４１１から出力させる。 The voice processing unit 406 converts the voice data read from the auxiliary storage unit 407 and the like into a voice signal, and outputs the voice data to the speaker 411 via the interface 408. That is, the voice processing unit 406 generates voice to be generated in the progress of the processing performed by the information processing device 400 under the control of the CPU 401, and outputs the voice from the speaker 411.

補助記憶部４０７は、ハードディスク等であり、情報処理装置４００全体の動作制御に必要な各種のプログラムや各種のデータを記憶する。例えば、補助記憶部４０７には、本実施形態に係る情報提供装置２００を実現するためのプログラムが記憶される。そして、ＣＰＵ４０１の制御によって、補助記憶部４０７は、記憶されたプログラムやデータを適宜読み出し、これらをＲＡＭ４０３等に一時的に記憶させる。 The auxiliary storage unit 407 is a hard disk or the like, and stores various programs and various data necessary for operating control of the entire information processing apparatus 400. For example, the auxiliary storage unit 407 stores a program for realizing the information providing device 200 according to the present embodiment. Then, under the control of the CPU 401, the auxiliary storage unit 407 appropriately reads out the stored programs and data, and temporarily stores them in the RAM 403 or the like.

インターフェース４０８には、操作ユニット４０９、表示ユニット４１０、及び、スピーカ４１１が接続される。なお、インターフェース４０８は、この他に接続された外部機器との間で必要な情報を送受信してもよい。 An operation unit 409, a display unit 410, and a speaker 411 are connected to the interface 408. The interface 408 may send and receive necessary information to and from other connected external devices.

操作ユニット４０９は、情報処理装置４００を利用する作業者等の操作入力を受け付ける。 The operation unit 409 receives an operation input of a worker or the like who uses the information processing device 400.

表示ユニット４１０は、画像処理部４０５により出力された画像データに応じた画像を描画し、情報処理装置４００を利用する作業者等に提示する。 The display unit 410 draws an image corresponding to the image data output by the image processing unit 405 and presents it to an operator or the like who uses the information processing device 400.

スピーカ４１１は、音声処理部４０６により出力された音声データに応じた音声を出力し、情報処理装置４００を利用する作業者に提示する。 The speaker 411 outputs a voice corresponding to the voice data output by the voice processing unit 406, and presents the speaker 411 to a worker who uses the information processing device 400.

この他に、情報処理装置４００は、補助記憶部４０７の代わりに、ＤＶＤ（Digital Versatile Disc）−ＲＯＭ等のドライブユニットを備えるようにしてもよい。この場合、情報処理装置４００は、ドライブユニットに装着されるＤＶＤ−ＲＯＭ等からプログラムやデータを読み出して、上記と同様に動作する。 In addition to this, the information processing device 400 may include a drive unit such as a DVD (Digital Versatile Disc) -ROM instead of the auxiliary storage unit 407. In this case, the information processing device 400 reads a program or data from a DVD-ROM or the like mounted on the drive unit, and operates in the same manner as described above.

以下、上記の情報処理装置４００により実現される情報提供装置２００の機能構成等について、図３〜図９を参照して説明する。情報処理装置４００に電源が投入されると、情報提供装置２００として機能させるプログラムが実行され、本実施形態に係る情報提供装置２００が実現される。
なお、ユーザ端末３００も同様に、情報処理装置４００によって実現されるが、こちらについては説明を省略し、本実施形態において最も特徴的な情報提供装置２００について、以下説明する。 Hereinafter, the functional configuration and the like of the information providing device 200 realized by the information processing device 400 will be described with reference to FIGS. 3 to 9. When the power is turned on to the information processing device 400, a program for functioning as the information providing device 200 is executed, and the information providing device 200 according to the present embodiment is realized.
The user terminal 300 is also realized by the information processing device 400, but the description thereof will be omitted, and the most characteristic information providing device 200 in the present embodiment will be described below.

（情報提供装置の機能構成）
図３は、本実施形態に係る情報提供装置２００の機能構成の一例を示すブロック図である。図示するように、情報提供装置２００は、取得部２１０と、データ記憶部２２０と、特定部２３０と、入力データ収集部２４０と、解析部２５０と、提供部２６０と、追加学習部２７０とを備える。 (Functional configuration of information providing device)
FIG. 3 is a block diagram showing an example of the functional configuration of the information providing device 200 according to the present embodiment. As shown in the figure, the information providing device 200 includes an acquisition unit 210, a data storage unit 220, a specific unit 230, an input data collecting unit 240, an analysis unit 250, a providing unit 260, and an additional learning unit 270. Be prepared.

取得部２１０は、ユーザ端末３００にて撮影された競走馬についての撮影画像を、インターネット９００を介してユーザ端末３００から取得する。
例えば、情報処理システム１００を利用するための専用アプリがユーザ端末３００で起動されている状態で、ユーザ端末３００の撮影部からパドック内の何れかの競走馬が動画撮影されると、その撮影画像が、ユーザ端末３００から情報提供装置２００へ送信されるようになっている。そのため、取得部２１０は、例えば、図４に示すような撮影画像（一例として、リアルタイムに撮影された動画像）をユーザ端末３００から取得する。この撮影画像には、ユーザが関心を示している競走馬ＫＢが撮影されている。
この他にも、取得部２１０は、競馬場に配置された固定カメラから、レース前に撮影された公式のパドック画像（公式撮影画像）も、取得できるようになっている。 The acquisition unit 210 acquires a photographed image of the racehorse photographed by the user terminal 300 from the user terminal 300 via the Internet 900.
For example, when a dedicated application for using the information processing system 100 is activated on the user terminal 300 and any racehorse in the paddock is shot as a moving image from the shooting unit of the user terminal 300, the shot image is taken. Is transmitted from the user terminal 300 to the information providing device 200. Therefore, the acquisition unit 210 acquires, for example, a captured image (as an example, a moving image captured in real time) as shown in FIG. 4 from the user terminal 300. In this photographed image, the racehorse KB that the user is interested in is photographed.
In addition to this, the acquisition unit 210 can also acquire an official paddock image (officially photographed image) taken before the race from a fixed camera arranged at the racetrack.

なお、上述したＮＩＣ４０４等が、このような取得部２１０として機能しうる。 The NIC 404 and the like described above can function as such an acquisition unit 210.

図３に戻って、データ記憶部２２０は、取得部２１０が取得した公式のパドック画像を記憶する。また、データ記憶部２２０は、取得部２１０がユーザ端末３００から取得した撮影画像を記憶してもよい。
この他に、データ記憶部２２０は、競走馬やレースについての詳細情報も記憶する。例えば、詳細情報には、競走馬についての競走馬情報２２１、騎手についての騎手情報２２２、及び、レースについてのレース情報２２３が含まれる。
具体的に、競走馬情報２２１は、図５に示すような情報であり、一例として、馬ＩＤ２２１ａ、性齢２２１ｂ、馬体重２２１ｃ、及び、前走時の馬体重２２１ｄが含まれている。なお、競走馬情報２２１には、馬名や、レース時の馬番や騎乗する騎手を識別する騎手ＩＤ等が含まれていてもよい。
また、騎手情報２２２は、図６に示すような情報であり、一例として、騎手ＩＤ２２２ａ、身長２２２ｂ、体重２２２ｃ、及び、通算勝利数２２２ｄが含まれている。
そして、レース情報２２３は、図７に示すような情報であり、一例として、レースＩＤ２２３ａ、本馬場２２３ｂ、距離２２３ｃ、及び、頭数２２３ｄが含まれている。なお、レース情報２２３には、当日の気象情報（気温、湿度、風力等）や馬場の状態（良、稍重、重、不良等）等が含まれていてもよい。 Returning to FIG. 3, the data storage unit 220 stores the official paddock image acquired by the acquisition unit 210. Further, the data storage unit 220 may store the captured image acquired by the acquisition unit 210 from the user terminal 300.
In addition to this, the data storage unit 220 also stores detailed information about racehorses and races. For example, the detailed information includes racehorse information 221 about the racehorse, jockey information 222 about the jockey, and race information 223 about the race.
Specifically, the racehorse information 221 is information as shown in FIG. 5, and includes, as an example, a horse ID 221a, a sex age 221b, a horse weight 221c, and a horse weight 221d at the time of the previous run. The racehorse information 221 may include a horse name, a horse number at the time of a race, a jockey ID for identifying a jockey to ride, and the like.
Further, the jockey information 222 is information as shown in FIG. 6, and includes, as an example, a jockey ID 222a, a height 222b, a weight 222c, and a total number of wins 222d.
The race information 223 is information as shown in FIG. 7, and includes, as an example, a race ID 223a, a main riding ground 223b, a distance 223c, and a number of horses 223d. The race information 223 may include weather information (temperature, humidity, wind power, etc.) of the day, riding conditions (good, heavy, heavy, bad, etc.).

なお、上述した補助記憶部４０７等が、このようなデータ記憶部２２０として機能しうる。 The auxiliary storage unit 407 and the like described above can function as such a data storage unit 220.

図３に戻って、特定部２３０は、取得部２１０がユーザ端末３００から取得した撮影画像に基づいて、競走馬を特定する。
例えば、特定部２３０は、上述した図４に示すような撮影画像から、競走馬ＫＢの馬番（ゼッケンに記された番号）や馬名（ゼッケンに記された名称）を文字認識し、レース情報２２３や競走馬情報２２１を参照して競走馬を特定する。なお、同日に複数の競走馬においてそれぞれ競馬が開催される場合には、例えば、特定部２３０は、ユーザ端末３００から現在位置情報を取得して、競馬場を特定した後に、撮影画像から馬番や馬名を文字認識して、競走馬を特定してもよい。 Returning to FIG. 3, the identification unit 230 identifies the racehorse based on the captured image acquired by the acquisition unit 210 from the user terminal 300.
For example, the specific unit 230 character-recognizes the horse number (number written on the number) and the horse name (name written on the number) of the racehorse KB from the photographed image as shown in FIG. 4 described above, and race information. The racehorse is specified by referring to 223 and the racehorse information 221. When horse racing is held for each of a plurality of racehorses on the same day, for example, the specific unit 230 acquires the current position information from the user terminal 300, identifies the racetrack, and then obtains the horse number or the horse number from the captured image. The racehorse may be identified by character-recognizing the horse name.

なお、上述した画像処理部４０５やＣＰＵ４０１等が、このような特定部２３０として機能しうる。 The image processing unit 405, the CPU 401, and the like described above can function as such a specific unit 230.

入力データ収集部２４０は、特定部２３０が特定した競走馬についての入力データを、データ記憶部２２０から収集する。
例えば、入力データ収集部２４０は、特定した競走馬が映るパドック画像を、データ記憶部２２０から収集する。つまり、入力データ収集部２４０は、データ記憶部２２０に記憶されるパドック画像（レース開始前の画像）から、特定した競走馬が映っている時間帯の画像を抽出する。
また、入力データ収集部２４０は、特定した競走馬についての詳細情報を、データ記憶部２２０から収集する。つまり、入力データ収集部２４０は、上述した競走馬情報２２１、騎手情報２２２、及び、レース情報２２３から、特定した競走馬についての情報を収集する。 The input data collecting unit 240 collects input data about the racehorse specified by the specific unit 230 from the data storage unit 220.
For example, the input data collecting unit 240 collects a paddock image of the specified racehorse from the data storage unit 220. That is, the input data collecting unit 240 extracts an image of the time zone in which the specified racehorse is shown from the paddock image (image before the start of the race) stored in the data storage unit 220.
Further, the input data collecting unit 240 collects detailed information about the specified racehorse from the data storage unit 220. That is, the input data collecting unit 240 collects information about the specified racehorse from the above-mentioned racehorse information 221 and jockey information 222 and race information 223.

なお、上述したＣＰＵ４０１等が、このような入力データ収集部２４０として機能しうる。 The CPU 401 and the like described above can function as such an input data collecting unit 240.

解析部２５０は、入力データ収集部２４０が収集した入力データを解析し、競走馬についてのスコア値を導出する。
例えば、解析部２５０には、過去のパドック画像を含む学習データを用いて機械学習を行った学習済モデル２５１が構築されている。
具体的には、図８に示すように、過去のレースにおける、パドック画像ＰＧ及び詳細情報ＳＪと、レース結果を示す結果情報ＫＪとが対応付けられた学習データによって学習された学習済モデル２５１が構築されている。この学習済モデル２５１は、一例として、多層の畳み込みニューラルネットワーク（Convolutional Neural Network）が深層学習されたものを模式的に示している。
解析部２５０は、このような学習済モデル２５１に、入力データ収集部２４０が収集したパドック画像を含む入力データを入力することで、入力データに応じたスコア値を導出する。
すなわち、学習済モデル２５１がパドック画像を含んだ学習データで学習されているため、どのような競走馬が、どのような毛のツヤ、筋肉、歩き方等の場合に、良い成績、若しくは、悪い成績を収めていたのかが学習されている。そのため、当日のレース前のパドック画像を含む入力データを学習済モデル２５１に入力することで、そのパドック画像に映った競走馬についての現時点における解析結果となるスコア値を導出することが可能となっている。 The analysis unit 250 analyzes the input data collected by the input data collection unit 240 and derives a score value for the racehorse.
For example, in the analysis unit 250, a trained model 251 in which machine learning is performed using training data including past paddock images is constructed.
Specifically, as shown in FIG. 8, the trained model 251 trained by the training data in which the paddock image PG and the detailed information SJ and the result information KJ indicating the race result in the past race are associated with each other Has been built. As an example, this trained model 251 schematically shows a multi-layered convolutional neural network that has been deep-learned.
The analysis unit 250 inputs the input data including the paddock image collected by the input data collection unit 240 into the trained model 251 to derive a score value according to the input data.
That is, since the trained model 251 is trained with the training data including the paddock image, what kind of racehorse has good results or bad results in what kind of hair gloss, muscle, walking method, etc. It is being learned whether or not they have achieved good grades. Therefore, by inputting the input data including the paddock image before the race of the day into the trained model 251, it is possible to derive the score value which is the analysis result at the present time for the racehorse reflected in the paddock image. ing.

なお、上述したＣＰＵ４０１等が、このような解析部２５０として機能しうる。 The CPU 401 and the like described above can function as such an analysis unit 250.

図３に戻って、提供部２６０は、解析部２５０が導出したスコア値をユーザ端末３００へ提供し、撮影画像を表示するユーザ端末３００の表示部に、スコア値を重畳して表示させる。
すなわち、提供部２６０は、スコア値をユーザ端末３００へ提供することで、例えば、図９に示すようなスコア値ＳＣが重畳された撮影画像を、ユーザ端末３００に表示させる。 Returning to FIG. 3, the providing unit 260 provides the score value derived by the analysis unit 250 to the user terminal 300, and superimposes and displays the score value on the display unit of the user terminal 300 that displays the captured image.
That is, by providing the score value to the user terminal 300, the providing unit 260 causes the user terminal 300 to display, for example, a captured image on which the score value SC as shown in FIG. 9 is superimposed.

なお、上述したＮＩＣ４０４等が、このような提供部２６０として機能しうる。 The NIC 404 and the like described above can function as such a providing unit 260.

図３に戻って、追加学習部２７０は、レース後に、パドック画像や撮影画像を含んだ学習データを用いて、学習済モデル２５１を追加学習させる。
なお、ユーザ端末３００から取得した撮影画像を学習データに含める際には、例えば、パドック画像よりも重みづけを小さくして、追加学習させるようにしてもよい。つまり、撮影画像は、公式のパドック画像よりも、画質等が低いことが予想されるため、追加学習部２７０は、撮影画像の重みづけを小さくして、学習済モデル２５１を追加学習させる。 Returning to FIG. 3, the additional learning unit 270 additionally learns the trained model 251 using the training data including the paddock image and the photographed image after the race.
When the captured image acquired from the user terminal 300 is included in the learning data, for example, the weighting may be smaller than that of the paddock image so that additional learning may be performed. That is, since the captured image is expected to have lower image quality and the like than the official paddock image, the additional learning unit 270 reduces the weighting of the captured image and additionally learns the trained model 251.

なお、上述したＣＰＵ４０１等が、このような追加学習部２７０として機能しうる。 The CPU 401 and the like described above can function as such an additional learning unit 270.

（情報提供装置の動作）
以下、このような構成の情報提供装置２００の動作について図１０を参照して説明する。図１０は、情報提供装置２００が実行する情報提供処理の流れを示すフローチャートである。この情報提供処理は、例えば、専用アプリが実行されているユーザ端末３００において、パドック内の何れかの競走馬が動画撮影された際に、開始される。 (Operation of information providing device)
Hereinafter, the operation of the information providing device 200 having such a configuration will be described with reference to FIG. FIG. 10 is a flowchart showing a flow of information providing processing executed by the information providing device 200. This information providing process is started, for example, when any racehorse in the paddock is videotaped on the user terminal 300 on which the dedicated application is executed.

まず、情報提供装置２００は、ユーザ端末３００から撮影画像を取得する（ステップＳ１１）。
すなわち、取得部２１０は、ユーザ端末３００にて撮影された競走馬についての撮影画像を、インターネット９００を介してユーザ端末３００から取得する。
例えば、取得部２１０は、上述した図４に示すような撮影画像をユーザ端末３００から取得する。この撮影画像には、ユーザが関心を示している競走馬ＫＢが撮影されている。 First, the information providing device 200 acquires a captured image from the user terminal 300 (step S11).
That is, the acquisition unit 210 acquires a photographed image of the racehorse photographed by the user terminal 300 from the user terminal 300 via the Internet 900.
For example, the acquisition unit 210 acquires a captured image as shown in FIG. 4 described above from the user terminal 300. In this photographed image, the racehorse KB that the user is interested in is photographed.

情報提供装置２００は、競走馬を特定する（ステップＳ１２）。
すなわち、特定部２３０は、ステップＳ１１にてユーザ端末３００から取得した撮影画像に基づいて、競走馬を特定する。
例えば、特定部２３０は、図４に示すような撮影画像から、競走馬ＫＢの馬番や馬名を文字認識し、レース情報２２３や競走馬情報２２１を参照して競走馬を特定する。その際、例えば、特定した競走馬の競走馬ＩＤをユーザＩＤ（ユーザ端末３００の端末ＩＤ等でもよい）と対応付けて記憶しておく。 The information providing device 200 identifies a racehorse (step S12).
That is, the identification unit 230 identifies the racehorse based on the captured image acquired from the user terminal 300 in step S11.
For example, the identification unit 230 character-recognizes the horse number and the horse name of the racehorse KB from the photographed image as shown in FIG. 4, and identifies the racehorse by referring to the race information 223 and the racehorse information 221. At that time, for example, the racehorse ID of the specified racehorse is stored in association with the user ID (which may be the terminal ID of the user terminal 300 or the like).

情報提供装置２００は、競走馬を特定済みであるか否かを判別する（ステップＳ１３）。
すなわち、情報提供装置２００は、撮影画像に映る競走馬を既に特定済みであるか、初めて特定したかを判別する。つまり、ユーザは、ユーザ端末３００から関心のある競走馬を自由に撮影できるため、後述するようにスコア値が提供され、ある競走馬を十分に視察した後には、別の競走馬を撮影することも起こり得る。
そのため、情報提供装置２００は、撮影される競走馬が切り替わったかどうかを判別する。例えば、ユーザＩＤと対応付けられる競走馬ＩＤが変化した場合に、撮影される競走馬が切り替わったと判別する。 The information providing device 200 determines whether or not the racehorse has been identified (step S13).
That is, the information providing device 200 determines whether the racehorse shown in the captured image has already been specified or has been specified for the first time. That is, since the user can freely photograph the racehorse of interest from the user terminal 300, a score value is provided as described later, and after sufficiently inspecting one racehorse, another racehorse is photographed. Can also occur.
Therefore, the information providing device 200 determines whether or not the racehorse to be photographed has been switched. For example, when the racehorse ID associated with the user ID changes, it is determined that the racehorse to be photographed has been switched.

情報提供装置２００は、特定済みであると判別すると（ステップＳ１３；Ｙｅｓ）、後述するステップＳ１６に処理を進める。 When the information providing device 200 determines that the information has been specified (step S13; Yes), the information providing device 200 proceeds to the process in step S16, which will be described later.

一方、特定済みでないと判別した場合（ステップＳ１３；Ｎｏ）に、情報提供装置２００は、競走馬が映る公式のパドック画像を含む入力データを収集する（ステップＳ１４）。
すなわち、入力データ収集部２４０は、上述したステップＳ１２にて特定した競走馬についての入力データを、データ記憶部２２０から収集する。
例えば、入力データ収集部２４０は、特定した競走馬が映るパドック画像を、データ記憶部２２０から収集する。つまり、入力データ収集部２４０は、データ記憶部２２０に記憶されるパドック画像から、特定した競走馬が映っている時間帯の画像を抽出する。
また、入力データ収集部２４０は、特定した競走馬についての詳細情報を、データ記憶部２２０から収集する。つまり、入力データ収集部２４０は、上述した競走馬情報２２１、騎手情報２２２、及び、レース情報２２３から、特定した競走馬についての情報を収集する。 On the other hand, when it is determined that it has not been specified (step S13; No), the information providing device 200 collects input data including an official paddock image showing the racehorse (step S14).
That is, the input data collecting unit 240 collects the input data for the racehorse specified in step S12 described above from the data storage unit 220.
For example, the input data collecting unit 240 collects a paddock image of the specified racehorse from the data storage unit 220. That is, the input data collecting unit 240 extracts an image of the time zone in which the specified racehorse is displayed from the paddock image stored in the data storage unit 220.
Further, the input data collecting unit 240 collects detailed information about the specified racehorse from the data storage unit 220. That is, the input data collecting unit 240 collects information about the specified racehorse from the above-mentioned racehorse information 221 and jockey information 222 and race information 223.

情報提供装置２００は、入力データを学習済モデル２５１に入力し、スコア値を導出する（ステップＳ１５）。
つまり、上述した図８に示すように、過去のレースにおける、パドック画像ＰＧ及び詳細情報ＳＪと、レース結果を示す結果情報ＫＪとが対応付けられた学習データによって学習された学習済モデル２５１が構築されている。
そのため、解析部２５０は、このような学習済モデル２５１に、上述したステップＳ１４にて収集したパドック画像を含む入力データを入力することで、入力データに応じたスコア値を導出する。
この際、学習済モデル２５１がパドック画像を含んだ学習データで学習されているため、どのような競走馬が、どのような毛のツヤ、筋肉、歩き方等の場合に、良い成績、若しくは、悪い成績を収めていたのかが学習されている。そのため、当日のレース前のパドック画像を含む入力データを学習済モデル２５１に入力することで、そのパドック画像に映った競走馬についての現時点におけるスコア値を導出することが可能となっている。 The information providing device 200 inputs the input data to the trained model 251 and derives a score value (step S15).
That is, as shown in FIG. 8 described above, the trained model 251 trained by the training data in which the paddock image PG and the detailed information SJ and the result information KJ indicating the race result in the past race are associated with each other is constructed. Has been done.
Therefore, the analysis unit 250 derives a score value according to the input data by inputting the input data including the paddock image collected in the above-mentioned step S14 into the trained model 251.
At this time, since the trained model 251 is trained with the training data including the paddock image, what kind of racehorse has good results or good results in what kind of hair gloss, muscle, walking method, etc. It is being learned whether they had bad grades. Therefore, by inputting the input data including the paddock image before the race of the day into the trained model 251, it is possible to derive the current score value of the racehorse reflected in the paddock image.

情報提供装置２００は、スコア値をユーザ端末に提供する（ステップＳ１６）。
すなわち、提供部２６０は、上述したステップＳ１５にて導出したスコア値をユーザ端末３００へ提供し、撮影画像を表示するユーザ端末３００の表示部に、スコア値を重畳して表示させる。
つまり、提供部２６０は、スコア値をユーザ端末３００へ提供することで、図９に示すようなスコア値ＳＣが重畳された撮影画像を、ユーザ端末３００に表示させる。 The information providing device 200 provides the score value to the user terminal (step S16).
That is, the providing unit 260 provides the score value derived in step S15 described above to the user terminal 300, and superimposes and displays the score value on the display unit of the user terminal 300 that displays the captured image.
That is, by providing the score value to the user terminal 300, the providing unit 260 causes the user terminal 300 to display a captured image on which the score value SC as shown in FIG. 9 is superimposed.

情報提供装置２００は、撮影画像を取得中であるか否かを判別する（ステップＳ１７）。
つまり、情報提供装置２００は、ユーザ端末３００にて競走馬の撮影が続いているかどうかを判別する。
情報提供装置２００は、撮影画像を取得中であると判別すると（ステップＳ１７；Ｙｅｓ）、上述したステップＳ１１に処理を戻す。 The information providing device 200 determines whether or not the captured image is being acquired (step S17).
That is, the information providing device 200 determines whether or not the shooting of the racehorse is continuing on the user terminal 300.
When the information providing device 200 determines that the captured image is being acquired (step S17; Yes), the processing returns to step S11 described above.

一方、撮影画像を取得中でないと判別した場合（ステップＳ１７；Ｎｏ）に、情報提供処理を終える。 On the other hand, when it is determined that the captured image is not being acquired (step S17; No), the information providing process is completed.

このような情報提供処理によって、ユーザは、パドック内の競走馬のうち、関心のある競走馬をユーザ端末３００から自由に撮影し、撮影画像を表示する表示部にその競走馬についてのスコア値を表示させることが可能となる。
そのため、せっかくユーザが競馬場に来場しているにも拘わらず、提示される注目ポイントの情報を目の前の競走馬に当てはめる時間を十分確保できないといった特許文献１の発明における課題を解決することができる。 By such information providing processing, the user can freely photograph the racehorse of interest among the racehorses in the paddock from the user terminal 300, and display the score value of the racehorse on the display unit displaying the photographed image. It becomes possible to display it.
Therefore, it is necessary to solve the problem in the invention of Patent Document 1, that it is not possible to secure sufficient time to apply the information of the presented points of interest to the racehorse in front of the racehorse even though the user has come to the racetrack. Can be done.

この結果、競馬場（競技会場）に来場しているユーザのユーザ端末３００に、競走馬（競技体）についての有用な情報を提供することができる。 As a result, it is possible to provide useful information about the racehorse (competition body) to the user terminal 300 of the user who is visiting the racetrack (competition venue).

（他の実施形態）
上記の実施形態では、ユーザ端末３００にてリアルタイムに撮影された撮影画像が、取得部２１０にて取得される場合について説明したが、ユーザ端末３００にて競走馬が所定時間動画撮影された後に、その撮影画像（撮影済みの動画データ）をユーザ端末３００から情報提供装置２００へ送るようにしてもよい。つまり、取得部２１０は、撮影済みの動画データをユーザ端末３００から取得する。
その場合、提供部２６０は、解析部２５０によって導出されたスコア値を、取得部２１０が取得した動画データに重畳させた加工済み動画データを生成し、生成した動画データをユーザ端末３００にて視聴（ダウンロード再生やストリーミング再生）できるようにしてもよい。 (Other embodiments)
In the above embodiment, the case where the captured image captured in real time by the user terminal 300 is acquired by the acquisition unit 210 has been described, but after the racehorse is videotaped for a predetermined time by the user terminal 300, The captured image (photographed moving image data) may be sent from the user terminal 300 to the information providing device 200. That is, the acquisition unit 210 acquires the captured moving image data from the user terminal 300.
In that case, the providing unit 260 generates processed moving image data in which the score value derived by the analysis unit 250 is superimposed on the moving image data acquired by the acquiring unit 210, and the generated moving image data is viewed on the user terminal 300. (Download playback or streaming playback) may be enabled.

また、上記の実施形態では、ユーザ端末３００にて動画撮影された撮影画像を用いる場合について説明したが、静止画の撮影画像を用いてもよい。その際、複数の撮影画像（複数枚の静止画）を用いてもよい。 Further, in the above embodiment, the case of using the captured image captured by the user terminal 300 as a moving image has been described, but the captured image of the still image may be used. At that time, a plurality of captured images (a plurality of still images) may be used.

また、上記の実施形態では、図９に示すように、スコア値ＳＣを数値で表示する場合について説明したが、このような数値以外に、グラフ表示やゲージ表示で、スコア値を表示するようにしてもよい。 Further, in the above embodiment, as shown in FIG. 9, the case where the score value SC is displayed as a numerical value has been described, but in addition to such a numerical value, the score value is displayed in a graph display or a gauge display. You may.

また、上記の実施形態では、追加学習部２７０が、レース後に、撮影画像を含んだ学習データを用いて、学習済モデル２５１を追加学習させる場合について説明したが、他の情報を含んだ学習データを用いて、学習済モデル２５１を追加学習させてもよい。
例えば、情報提供装置２００に、競走馬において注目すべき箇所と当該箇所の状態とを含む注目情報を、ユーザ端末３００から受け付ける受付部を更に備えるようにし、追加学習部２７０が、この注目情報を更に含んだ学習データを用いて、学習済モデル２５１を追加学習させるようにしてもよい。
例えば、競走馬を視察したユーザは、その競走馬に注目した箇所（一例として、毛のツヤ、筋肉、歩き方等を）と、その箇所の状態（一例として、ツヤ：良、筋肉：ハリ良、歩き方：バランス良等）とを含む注目情報を、ユーザ端末３００へ入力できるようになっている。そのため、受付部は、そのような注目情報をユーザ端末３００から受け付ける。
そして、追加学習部２７０が、受け付けた注目情報を更に含んだ学習データを用いて、学習済モデル２５１を追加学習させる。
この場合、ユーザが気が付いた注目情報を含めて学習済モデル２５１を追加学習させることができる。 Further, in the above embodiment, the case where the additional learning unit 270 additionally learns the trained model 251 by using the learning data including the captured image after the race has been described, but the learning data including other information has been described. May be used to additionally train the trained model 251.
For example, the information providing device 200 is further provided with a reception unit that receives attention information including a portion to be noted in the racehorse and the state of the portion from the user terminal 300, and the additional learning unit 270 provides the attention information. Further, the trained model 251 may be additionally trained by using the included training data.
For example, a user who inspects a racehorse can see the part of the racehorse that he or she has focused on (for example, the gloss, muscles, and walking style of hair) and the condition of that part (for example, gloss: good, muscle: good elasticity). , Walking method: good balance, etc.) can be input to the user terminal 300. Therefore, the reception unit receives such attention information from the user terminal 300.
Then, the additional learning unit 270 additionally learns the trained model 251 using the learning data including the received attention information.
In this case, the trained model 251 can be additionally trained including the attention information noticed by the user.

上記の実施形態では、公営競技の一例として、競馬の情報処理システム１００を一例として説明したが、他の公営競技についても適用可能である。
例えば、競輪であれば、ユーザ端末３００からレース前の自転車（選手が乗った自転車）の予備走行を撮影するようにし、また、競艇であれば、ユーザ端末３００からレース前のボート（選手が乗ったボート）の予備走行を撮影するようにする。
なお、学習済モデル２５１は、自転車やボートの予備走行を公式に撮影した画像を含む学習データによって学習されているものとする。
そして、解析部２５０は、このような学習済モデル２５１に、予備走行を公式に撮影した画像を含む入力データを入力することで、上記と同様に、入力データに応じたスコア値を導出する。
この場合も、競輪場や競艇場（競技会場）に来場しているユーザのユーザ端末３００に、自転車やボート（競技体）についての有用な情報を提供することができる。 In the above embodiment, the horse racing information processing system 100 has been described as an example of the public competition, but it can also be applied to other public competitions.
For example, in the case of a bicycle race, the preliminary run of the bicycle before the race (the bicycle on which the athlete rides) is photographed from the user terminal 300, and in the case of a boat race, the boat before the race (the athlete rides) is photographed from the user terminal 300. Try to take a picture of the preliminary run of the boat.
It is assumed that the trained model 251 is trained by learning data including an image obtained by officially taking a preliminary run of a bicycle or a boat.
Then, the analysis unit 250 inputs the input data including the image obtained by officially capturing the preliminary run into the trained model 251 to derive the score value according to the input data in the same manner as described above.
In this case as well, useful information about the bicycle or the boat (competition body) can be provided to the user terminal 300 of the user who is visiting the bicycle race track or the boat race track (competition venue).

以上説明したように、本発明によれば、競技会場に来場しているユーザの端末に、競技体についての有用な情報を提供することのできる情報提供装置、情報提供方法、ならびに、プログラムを提供することができる。 As described above, according to the present invention, the terminal of a user who is visiting the competition venue is provided with an information providing device, an information providing method, and a program capable of providing useful information about the competition body. can do.

１００情報処理システム
２００情報提供装置
２１０取得部
２２０データ記憶部
２３０特定部
２４０入力データ収集部
２５０解析部
２５１学習済モデル
２６０提供部
２７０追加学習部
３００ユーザ端末
４００情報処理装置
４０１ＣＰＵ
４０２ＲＯＭ
４０３ＲＡＭ
４０４ＮＩＣ
４０５画像処理部
４０６音声処理部
４０７補助記憶部
４０８インターフェース
４０９操作ユニット
４１０表示ユニット
４１１スピーカ
９００インターネット 100 Information processing system 200 Information providing device 210 Acquisition unit 220 Data storage unit 230 Specific unit 240 Input data collecting unit 250 Analysis unit 251 Learned model 260 Providing unit 270 Additional learning unit 300 User terminal 400 Information processing device 401 CPU
402 ROM
403 RAM
404 NIC
405 Image processing unit 406 Audio processing unit 407 Auxiliary storage unit 408 Interface 409 Operation unit 410 Display unit 411 Speaker 900 Internet

Claims

It is an information providing device that provides information about the competitors participating in the competition run to the user terminal.
An acquisition unit that acquires a photographed image of the competition body photographed by the user terminal from the user terminal, and
Based on the acquired captured image, a specific part that identifies the competition body and
An analysis unit that analyzes input data including officially photographed images of the identified athlete and derives a score value for the athlete.
A providing unit that provides the derived score value to the user terminal and displays the score value superimposed on the display unit of the user terminal that displays the captured image.
An information providing device characterized by being provided with.

The acquisition unit acquires the captured image captured in real time by the user terminal from the user terminal before the start of the competition run.
The analysis unit inputs the officially captured image taken before the start of the competition run and input data including detailed information about the competition run into a predetermined trained model to obtain the score value. Derived,
The information providing device according to claim 1.

The trained model is pre-learned by learning data in which the official photographed image and the detailed information in the past competition run are associated with the result information indicating the result of the competition run.
The information providing device according to claim 2, wherein the information providing device is characterized by the above.

An additional learning unit for additionally learning the trained model by using the learning data including the captured image acquired by the acquisition unit is further provided.
The information providing device according to claim 3, wherein the information providing device is characterized by the above.

A reception unit that receives attention information including a noteworthy part in the competition body and the state of the part from the user terminal, and a reception unit.
An additional learning unit for additionally learning the trained model by using the learning data further including the attention information received by the reception unit is further provided.
The information providing device according to claim 3, wherein the information providing device is characterized by the above.

It is an information providing method in an information providing device that provides information about a competitor participating in a competition run to a user terminal.
An acquisition step in which the information providing device acquires a photographed image of the competition body photographed by the user terminal from the user terminal.
A specific step in which the information providing device identifies the athlete based on the acquired captured image, and
An analysis step in which the information providing device analyzes input data including an officially photographed image of the specified athlete, and derives a score value for the athlete.
A providing step in which the information providing device provides the derived score value to the user terminal, and the score value is superimposed and displayed on the display unit of the user terminal displaying the captured image.
An information providing method characterized by providing.

A computer that provides the user terminal with information about the competitors participating in the competition.
An acquisition unit that acquires a photographed image of the competition body photographed by the user terminal from the user terminal.
A specific part that identifies the athlete based on the acquired captured image,
An analysis unit that analyzes input data including officially photographed images of the identified athlete and derives a score value for the athlete.
A providing unit that provides the derived score value to the user terminal and superimposes and displays the score value on the display unit of the user terminal that displays the captured image.
A program characterized by functioning as.