JPWO2021248050A5 - - Google Patents
Download PDFInfo
- Publication number
- JPWO2021248050A5 JPWO2021248050A5 JP2022574630A JP2022574630A JPWO2021248050A5 JP WO2021248050 A5 JPWO2021248050 A5 JP WO2021248050A5 JP 2022574630 A JP2022574630 A JP 2022574630A JP 2022574630 A JP2022574630 A JP 2022574630A JP WO2021248050 A5 JPWO2021248050 A5 JP WO2021248050A5
- Authority
- JP
- Japan
- Prior art keywords
- video
- golf
- golfer
- user
- hole
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 description 389
- 238000013473 artificial intelligence Methods 0.000 description 176
- 238000012545 processing Methods 0.000 description 133
- 230000008569 process Effects 0.000 description 85
- 230000000694 effects Effects 0.000 description 78
- 238000004891 communication Methods 0.000 description 54
- 238000003860 storage Methods 0.000 description 27
- 238000010586 diagram Methods 0.000 description 25
- 238000001514 detection method Methods 0.000 description 19
- 238000010801 machine learning Methods 0.000 description 19
- 230000002354 daily effect Effects 0.000 description 14
- 238000007726 management method Methods 0.000 description 14
- 230000003287 optical effect Effects 0.000 description 14
- 238000009826 distribution Methods 0.000 description 13
- 230000004913 activation Effects 0.000 description 12
- 238000013528 artificial neural network Methods 0.000 description 12
- 230000033001 locomotion Effects 0.000 description 12
- 230000008901 benefit Effects 0.000 description 11
- 238000005516 engineering process Methods 0.000 description 11
- 230000009471 action Effects 0.000 description 9
- 230000003213 activating effect Effects 0.000 description 9
- 238000012805 post-processing Methods 0.000 description 9
- 230000001413 cellular effect Effects 0.000 description 8
- 238000003066 decision tree Methods 0.000 description 8
- XEEYBQQBJWHFJM-UHFFFAOYSA-N iron Substances [Fe] XEEYBQQBJWHFJM-UHFFFAOYSA-N 0.000 description 8
- 229910052742 iron Inorganic materials 0.000 description 8
- 239000000463 material Substances 0.000 description 7
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 7
- 230000003993 interaction Effects 0.000 description 6
- 230000002829 reductive effect Effects 0.000 description 6
- 238000013459 approach Methods 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 239000004576 sand Substances 0.000 description 5
- 238000004422 calculation algorithm Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 230000002860 competitive effect Effects 0.000 description 4
- 238000013135 deep learning Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000004519 manufacturing process Methods 0.000 description 4
- 239000000047 product Substances 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 230000001360 synchronised effect Effects 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 101100135641 Caenorhabditis elegans par-3 gene Proteins 0.000 description 3
- 244000025254 Cannabis sativa Species 0.000 description 3
- 239000008186 active pharmaceutical agent Substances 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 239000000835 fiber Substances 0.000 description 3
- 238000009434 installation Methods 0.000 description 3
- 230000029305 taxis Effects 0.000 description 3
- 238000012795 verification Methods 0.000 description 3
- 241000273930 Brevoortia tyrannus Species 0.000 description 2
- 102100040853 PRKC apoptosis WT1 regulator protein Human genes 0.000 description 2
- 101710162991 PRKC apoptosis WT1 regulator protein Proteins 0.000 description 2
- 238000003491 array Methods 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 239000003795 chemical substances by application Substances 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 230000009849 deactivation Effects 0.000 description 2
- 230000003203 everyday effect Effects 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 2
- 230000000977 initiatory effect Effects 0.000 description 2
- 235000000396 iron Nutrition 0.000 description 2
- 230000000670 limiting effect Effects 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000004091 panning Methods 0.000 description 2
- 238000001454 recorded image Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- HPTJABJPZMULFH-UHFFFAOYSA-N 12-[(Cyclohexylcarbamoyl)amino]dodecanoic acid Chemical group OC(=O)CCCCCCCCCCCNC(=O)NC1CCCCC1 HPTJABJPZMULFH-UHFFFAOYSA-N 0.000 description 1
- 241000271566 Aves Species 0.000 description 1
- 101100489581 Caenorhabditis elegans par-5 gene Proteins 0.000 description 1
- 208000001613 Gambling Diseases 0.000 description 1
- 241000238631 Hexapoda Species 0.000 description 1
- 238000003619 Marshal aromatic alkylation reaction Methods 0.000 description 1
- 241001465754 Metazoa Species 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000012467 final product Substances 0.000 description 1
- 235000021384 green leafy vegetables Nutrition 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000003278 mimic effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000036961 partial effect Effects 0.000 description 1
- REQCZEXYDRLIBE-UHFFFAOYSA-N procainamide Chemical compound CCN(CC)CCNC(=O)C1=CC=C(N)C=C1 REQCZEXYDRLIBE-UHFFFAOYSA-N 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 238000005086 pumping Methods 0.000 description 1
- 208000037826 rabdomyosarcoma Diseases 0.000 description 1
- 238000000611 regression analysis Methods 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 230000008093 supporting effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000010200 validation analysis Methods 0.000 description 1
- 230000003442 weekly effect Effects 0.000 description 1
- 210000000707 wrist Anatomy 0.000 description 1
Images
Description
関連出願の相互参照
本出願は、2020年6月4日に出願された「Autonomous Activity Monitoring and Lottery System and Method」と題する米国仮特許出願第63/034,667号の利益を主張し、その内容全体が参照により本明細書に組み込まれる。
CROSS-REFERENCE TO RELATED APPLICATIONS This application claims the benefit of U.S. Provisional Patent Application No. 63/034,667, filed June 4, 2020, entitled "Autonomous Activity Monitoring and Lottery System and Method," and the contents thereof Incorporated herein by reference in its entirety.
発明の分野
本開示は、デジタルメディア制作に関する。より詳細には、本開示は、自律型ゴルフ競技会システムおよび方法に関する。
FIELD OF THE INVENTION This disclosure relates to digital media production. More particularly, the present disclosure relates to autonomous golf competition systems and methods.
発明の背景
今日、様々な形態のビデオ録画および制作が存在する。例えば、映画ビデオの制作は非常に労働集約的な作業であり、監督は複数の視野角から複数のショットを撮影し、ポスト制作は最終的なビデオを生成するのに数か月かかる。このようなビデオ録画は非常に高価であり、多くの人的資源を必要とする。スポーツでは、ビデオストリーミング技術は、現実のイベントをキャプチャするために使用され、プレイが行われている方向に撮影技師がカメラを動かしてそれを行う。これにより、プレイの異なる態様に対してカメラカットが行われるリアルタイム録画を可能にすることができる。時間の長さは非常に圧縮されているが、所望の映像をキャプチャするためにプレイのフィールドを手動で録画し追いかける必要が依然として存在する。別の態様では、ライブスポーツビデオの場合、ビデオは、テレビ放送されたスポーツイベントを放送するように構成された専用の高速ネットワークを使用してほぼリアルタイムでストリーミングされる。しかしながら、これらのシステムの各々には、監督またはビデオ撮影者に関連映像をキャプチャさせる必要なしにビデオ映像を処理および通信するための自動化された手段、および効率的な方法でビデオを生成して視聴者に通信するための自動化された方法が欠けている。
BACKGROUND OF THE INVENTION Various forms of video recording and production exist today. For example, producing a movie video is a highly labor-intensive task, with directors shooting multiple shots from multiple viewing angles, and post-production taking months to produce the final video. Such video recording is very expensive and requires a lot of human resources. In sports, video streaming technology is used to capture real-life events, and does so by having a cinematographer move the camera in the direction of the play. This makes it possible to perform real-time recording in which camera cuts are made for different aspects of the play. Although the length of time has been greatly compressed, there is still a need to manually record and follow the field of play to capture the desired footage. In another aspect, for live sports video, the video is streamed in near real time using a dedicated high speed network configured to broadcast televised sporting events. However, each of these systems includes automated means for processing and communicating video footage without requiring a director or videographer to capture the relevant footage, and for producing and viewing video in an efficient manner. There is a lack of an automated way to communicate with people.
概要
本開示の一態様は、スポーツイベントを自動的に録画するためのシステムを提供することである。
Overview One aspect of the present disclosure is to provide a system for automatically recording sporting events.
一態様によれば、パフォーマンスベースの競技会を運営するためのシステムであって、システムは、ゴルフホールを有するゴルフコースに配置されたリモートメディアシステム(RMS)であって、ゴルフホールで検出されたゴルファーのビデオを録画するように構成された第1のAI対応カメラを含むRMSと、RMSに通信可能に結合され、RMSに対してリモートに配置された競技会ベースのネットワークメディアプロセッサおよびサービス(CNMS)であって、ビデオ録画をアクティブ化するための入力を含む録画イベント要求を開始するように構成されたネットワーク通信インタフェースであって、録画イベント要求はRMSに通信される、ネットワーク通信インタフェースと、AI対応カメラのアクティブ化要求を受信し、録画要求を確認するように構成されたネットワークメディアプロセッサとを含むCNMSと、ビデオ録画をアクティブ化するためにCNMSにセッション要求を送信するように構成されたモバイルアプリケーションを含むデジタルメディア対応宛先であって、要求は、デジタルメディア対応宛先の一意識別子と、ゴルフホールの位置と、ユーザプロファイル識別子とを含む、デジタルメディア対応宛先とを備え、CNMSは、競技会に参加することの同意を示すユーザからの入力を受信するように構成され、CNMSは、さらに、競技会に関連する成功した試行を検出するように構成される、システム。 According to one aspect, a system for operating a performance-based competition includes a remote media system (RMS) located at a golf course having a golf hole, the system comprising: a remote media system (RMS) located at a golf course having a golf hole; an RMS including a first AI-enabled camera configured to record video of the golfer; and a competition-based network media processor and service (CNMS) communicatively coupled to the RMS and located remotely to the RMS. ), the network communication interface configured to initiate a recording event request including an input for activating video recording, the recording event request being communicated to the RMS; and a network media processor configured to receive the enabled camera activation request and confirm the recording request, and a mobile configured to send a session request to the CNMS to activate video recording. a digital media-enabled destination including an application, the request comprising a digital media-enabled destination including a unique identifier for the digital media-enabled destination, a golf hole location, and a user profile identifier; A system configured to receive input from a user indicating consent to participate, the CNMS further configured to detect successful attempts associated with a competition.
別の態様では、スキルベースの競技会を自動的に管理するための方法が提供され、方法は、ゴルフコース上のゴルフホールにおけるゴルファーの存在を検出することと、検出された存在に応答して、競技会ベースのネットワークメディアプロセッサおよびサービス(CNMS)においてアクティブ化要求を受信することであって、アクティブ化要求はゴルファーのユーザプロファイル識別子を含む、受信することと、ユーザプロファイル識別子およびゴルフホールの位置を使用してゴルファーを確認することと、アクティブ化要求を送信し、ゴルフホールでAI対応カメラを使用してゴルファーおよび競技会の録画をアクティブ化することと、競技会において、入賞イベントの発生を検出することとを含む。 In another aspect, a method for automatically managing a skill-based competition is provided, the method comprising: detecting the presence of a golfer at a golf hole on a golf course; , receiving an activation request at a competition-based network media processor and service (CNMS), the activation request including a user profile identifier of the golfer; and receiving the user profile identifier and the location of the golf hole. to verify golfers, send activation requests and activate recordings of golfers and competitions using AI-enabled cameras at golf holes, and to identify winning events in competitions. and detecting.
別の態様では、AI対応ゴルフコースが提供され、AI対応ゴルフコースは、グリーンと、ティーボックスと、ピンがホール内に配置されたホールとを有する第1のゴルフホールと、ゴルフホールを有するゴルフコースに配置されたリモートメディアシステム(RMS)であって、ゴルフホールで検出されたゴルファーのビデオを録画するように構成された第1のAI対応カメラを含み、RMSに通信可能に結合され、RMSに対してリモートに配置された、競技会ベースのネットワークメディアプロセッサおよびサービス(CNMS)と通信し、CNMSは、ビデオ録画をアクティブ化するための入力を含む録画イベント要求を開始するように構成されたネットワーク通信インタフェースであって、録画イベント要求はRMSに通信される、ネットワーク通信インタフェースと、AI対応カメラのアクティブ化要求を受信し、録画要求を確認するように構成されたネットワークメディアプロセッサとを含むRMSと、ビデオ録画をアクティブ化するためにCNMSにセッション要求を送信するように構成されたモバイルアプリケーションを含むデジタルメディア対応宛先であって、要求は、デジタルメディア対応宛先の一意識別子と、ゴルフホールの位置と、ユーザプロファイル識別子とを含む、デジタルメディア対応宛先とを備え、CNMSは、競技会に参加することの同意を示すユーザからの入力を受信するように構成され、CNMSは、競技会に関連する成功した試行を検出するようにさらに構成される。 In another aspect, an AI-enabled golf course is provided, the AI-enabled golf course includes: a first golf hole having a green, a tee box, a hole with a pin disposed in the hole; a remote media system (RMS) located at the course, including a first AI-enabled camera configured to record video of a golfer detected at a golf hole, and communicatively coupled to the RMS; a competition-based network media processor and service (CNMS) located remotely to the computer, the CNMS configured to initiate a recording event request that includes an input for activating video recording; an RMS comprising: a network communication interface, wherein the recording event request is communicated to the RMS; and a network media processor configured to receive the AI-enabled camera activation request and confirm the recording request. and a digital media-enabled destination including a mobile application configured to send a session request to a CNMS to activate video recording, the request including a unique identifier of the digital media-enabled destination and a location of the golf hole. and a user profile identifier, the CNMS is configured to receive input from the user indicating consent to participate in the competition, and the CNMS is configured to receive input from the user indicating consent to participate in the competition. Further configured to detect a successful attempt.
図面の簡単な説明
本開示の他の態様は、添付の図面に関連して考慮されるときに以下の詳細な説明を参照することによってよりよく理解されるので、容易に理解されるであろう。
BRIEF DESCRIPTION OF THE DRAWINGS Other aspects of the present disclosure will be better understood and readily understood by reference to the following detailed description when considered in conjunction with the accompanying drawings. .
開示の詳細な説明
図面と組み合わせた以下の説明は、本明細書に開示される教示の理解を助けるために提供される。以下の説明は、教示の特定の実施態様および実施形態に焦点を当てる。この焦点は、教示を説明するのを助けるために提供され、教示の範囲または適用性に対する限定として解釈されるべきではない。しかしながら、本出願では他の教示を確実に利用することができる。教示はまた、他のアプリケーションにおいて、分散コンピューティングアーキテクチャ、クライアント/サーバアーキテクチャ、またはミドルウェアサーバアーキテクチャおよび関連するコンポーネントなどのいくつかの異なる種類のアーキテクチャで利用することもできる。
DETAILED DESCRIPTION OF THE DISCLOSURE The following description, taken in conjunction with the drawings, is provided to assist in understanding the teachings disclosed herein. The following description focuses on particular implementations and embodiments of the teachings. This focus is provided to help explain the teachings and is not to be construed as a limitation on the scope or applicability of the teachings. However, other teachings can certainly be utilized in this application. The teachings may also be utilized in several different types of architectures, such as distributed computing architectures, client/server architectures, or middleware server architectures and associated components, in other applications.
互いに通信しているデバイスまたはプログラムは、特に明記しない限り、互いに継続的に通信している必要はない。さらに、互いに通信するデバイスまたはプログラムは、直接的に、または1つまたは複数の仲介者を介して間接的に通信することができる。 Devices or programs that are in communication with each other need not be in continuous communication with each other, unless specified otherwise. Additionally, devices or programs that communicate with each other may communicate directly or indirectly through one or more intermediaries.
以下に説明する実施形態は、ネットワーク要素間の通信対話の全部または一部を管理する分散コンピューティングソリューションを部分的に説明する。これに関連して、通信対話は、情報を送信すること、情報を要求すること、情報を受信すること、情報の要求を受信すること、またはそれらの任意の組合せを含むことができる。したがって、通信対話は、一方向、双方向、多方向、またはそれらの任意の組合せであり得る。状況によっては、通信対話は比較的複雑であり、2つ以上のネットワーク要素を含む可能性がある。例えば、通信対話は、クライアントとサーバとの間の「会話」または一連の関連する通信であってもよく、各ネットワーク要素は、相手との間で情報を送受信する。ネットワーク要素間の通信対話は、必ずしも1つの特定の形態のみに限定されない。ネットワーク要素は、ノード、ハードウェア、ソフトウェア、ファームウェア、ミドルウェア、コンピューティングシステムの別のコンポーネント、またはそれらの任意の組合せであってもよい。 The embodiments described below partially describe distributed computing solutions that manage all or a portion of communication interactions between network elements. In this regard, communication interactions may include sending information, requesting information, receiving information, receiving requests for information, or any combination thereof. Thus, communication interactions may be unidirectional, bidirectional, multidirectional, or any combination thereof. In some situations, communication interactions may be relatively complex and include two or more network elements. For example, a communication interaction may be a "conversation" or a series of related communications between a client and a server, with each network element sending and receiving information to and from the other. Communication interactions between network elements are not necessarily limited to only one particular form. A network element may be a node, hardware, software, firmware, middleware, another component of a computing system, or any combination thereof.
以下の説明では、フローチャート化された技術またはアルゴリズムは、一連の順次のアクションで説明され得る。そうではないと明示的に述べられていない限り、動作の順序および動作を実行する当事者は、教示の範囲から逸脱することなく自由に変更することができる。アクションは、いくつかの方法で追加、削除、または変更することができる。同様に、アクションは並べ替えられてもループされてもよい。さらに、プロセス、方法、アルゴリズムなどを順次の順序で説明することができるが、そのようなプロセス、方法、アルゴリズム、またはそれらの任意の組合せは、代替の順序で実行されるように動作可能であり得る。さらに、プロセス、方法、またはアルゴリズム内のいくつかのアクションは、少なくともある時点の間に同時に実行されてもよく(例えば、並行して実行されるアクション)、全体的に、部分的に、またはそれらの任意の組合せで実行することもできる。本明細書で使用される場合、用語「含む(comprises)」、「含む(comprising)」、「含む(includes)」、「含む(including)」、「有する(has)」、「有する(having)」、またはそれらの任意の他の変形は、非排他的包含を含むことを意図している。例えば、特徴のリストを含むプロセス、方法、物品、または装置は、必ずしもそれらの特徴のみに限定されず、明示的に列挙されていない、またはそのようなプロセス、方法、物品、または装置に固有の他の特徴を含むことができる。さらに、そうではないと明示的に述べられていない限り、「または」は、包含的論理和を指し、排他的論理和を指すものではない。例えば、条件AまたはBは、以下のいずれか1つ、すなわち、Aが真(または存在)であり、Bが偽(または非存在)、Aが偽(または非存在)であり、Bが真(または存在)、およびAとBの両方が真(または存在)、によって満たされる。 In the description that follows, a flowcharted technique or algorithm may be described as a series of sequential actions. Unless expressly stated to the contrary, the order of the operations and the parties performing the operations may be changed at will without departing from the scope of the teachings. Actions can be added, removed, or modified in several ways. Similarly, actions may be reordered or looped. Further, although processes, methods, algorithms, etc. may be described in a sequential order, such processes, methods, algorithms, or any combination thereof may be operable to be performed in an alternative order. obtain. Furthermore, some actions within a process, method, or algorithm may be performed simultaneously (e.g., actions performed in parallel), at least during some point in time, in whole, in part, or It is also possible to perform any combination of the following. As used herein, the terms "comprises", "comprising", "includes", "including", "has", "having" ”, or any other variations thereof, are intended to include non-exclusive inclusion. For example, a process, method, article, or device that includes a list of features is not necessarily limited to only those features and includes features not explicitly listed or unique to such process, method, article, or device. Other features may be included. Further, unless explicitly stated to the contrary, "or" refers to an inclusive disjunction and not to an exclusive disjunction. For example, condition A or B is one of the following: A is true (or exists), B is false (or does not exist), A is false (or does not exist), and B is true. (or exists), and both A and B are true (or exist).
また、「a」または「an」の使用は、本明細書に記載の要素および構成要素を記述するために用いられる。これは、単に便宜上、および本発明の範囲の一般的な意味を与えるために行われる。この記述は、1つまたは少なくとも1つを含むように読まれるべきであり、単数形は複数形も含み、またはその逆も同様であるが、そうでないことを意味することが明らかである場合は除く。例えば、本明細書で単一のデバイスが説明される場合、単一のデバイスの代わりに2つ以上のデバイスが使用されてもよい。同様に、1つよりも多くのデバイスが本明細書に記載されている場合、単一のデバイスがその1つのデバイスの代わりに使用されてもよい。 Also, the use of "a" or "an" is used to describe elements and components described herein. This is done merely for convenience and to give a general sense of the scope of the invention. This description should be read to include one or at least one, and the singular also includes the plural and vice versa, unless it is obvious that it is meant otherwise. except. For example, when a single device is described herein, two or more devices may be used in place of a single device. Similarly, if more than one device is described herein, a single device may be used in place of that one device.
他に定義されない限り、本明細書で使用されるすべての技術用語および科学用語は、本発明が属する技術分野の当業者によって一般的に理解されるのと同じ意味を有する。本明細書に記載の方法および材料と類似または同等の方法および材料を本発明の実施形態の実施または試験に使用することができるが、適切な方法および材料を以下に記載する。本明細書で言及されるすべての刊行物、特許出願、特許、および他の参考文献は、特定の節が引用されるのでない限り、その全体が参照により組み込まれる。矛盾する場合、定義を含む本明細書が優先する。さらに、材料、方法、および実施例は例示にすぎず、限定することを意図するものではない。 Unless defined otherwise, all technical and scientific terms used herein have the same meaning as commonly understood by one of ordinary skill in the art to which this invention belongs. Although methods and materials similar or equivalent to those described herein can be used in the practice or testing of embodiments of the invention, suitable methods and materials are described below. All publications, patent applications, patents, and other references mentioned herein are incorporated by reference in their entirety, unless a specific section is cited. In case of conflict, the present specification, including definitions, will control. Furthermore, the materials, methods, and examples are illustrative only and not intended to be limiting.
本明細書に記載されていない限り、特定の材料、処理動作、および回路に関する多くの詳細は従来のものであり、コンピューティング、電子機器、およびソフトウェア技術内の教科書および他のソースに見出すことができる。 Unless otherwise described herein, many details regarding specific materials, processing operations, and circuits are conventional and may be found in textbooks and other sources within the computing, electronics, and software arts. can.
本開示の目的のために、メディア処理システムおよびサービスは、ビジネス、科学、制御、娯楽、または他の目的のための任意の形式の情報、知能、またはデータを計算、分類、処理、送信、受信、検索、発信、切り替え、記憶、表示、提示、検出、録画、再生、取り扱い、または利用するように動作可能な任意の手段または手段の集合を含むことができる。例えば、メディア処理システムは、モバイルデバイス、デジタルカメラ、パーソナルコンピュータ、PDA、消費者電子デバイス、スマートフォン、セットトップボックス、デジタルメディア加入者モジュール、1つまたは複数のクラウドまたはネットワークサービスおよびストレージ、ケーブルモデム、光ファイバ対応通信デバイス、メディアゲートウェイ、ネットワークサーバまたはストレージデバイス、スイッチルータ、ワイヤレスルータ、または他のネットワーク通信デバイス、または任意の他の適切なデバイスであってもよく、サイズ、形状、性能、機能性、および価格が様々であってもよい。 For purposes of this disclosure, media processing systems and services include computing, classifying, processing, transmitting, and receiving information, intelligence, or data in any form for business, scientific, control, entertainment, or other purposes. , any means or set of means operable to retrieve, originate, switch, store, display, present, detect, record, play, handle, or utilize. For example, a media processing system may include a mobile device, a digital camera, a personal computer, a PDA, a consumer electronic device, a smartphone, a set-top box, a digital media subscriber module, one or more cloud or network services and storage, a cable modem, It may be a fiber optic-enabled communication device, media gateway, network server or storage device, switch router, wireless router, or other network communication device, or any other suitable device, size, shape, performance, functionality. , and prices may vary.
本明細書で開示されるプロセッサは、メモリ、中央処理装置(CPU)、ハードウェア、ローカルメモリ、またはソフトウェア制御ロジックなどの1つまたは複数の処理リソースまたはコントローラを含むことができる。追加のコンポーネントは、内部および外部記憶デバイスを含む1つまたは複数のメモリデバイス、1つまたは複数の無線有線通信インタフェース、ディスプレイ、キーパッド、タッチスクリーン、タッチパッド、音声認識、顔またはAI対応画像認識などの入力デバイス、1つまたは複数のカメラまたはカメラ入力、オーディオ入力、電源、または様々な組合せを含むことができる。プロセッサは、メディア処理システム内に埋め込むことができ、メディア処理システムとは別個に、またはそれらの組合せで提供することができる。プロセッサは、APIなどのサービス、Amazon Cloudサービスなどのネットワークサービス、またはそれらの組合せ内にのみ記憶されたデジタルロジックとして実現することもできる。本明細書では、本開示の範囲内で展開することができる他の形態のプロセッサを例として説明する。 A processor disclosed herein may include one or more processing resources or controllers such as memory, central processing unit (CPU), hardware, local memory, or software control logic. Additional components include one or more memory devices including internal and external storage devices, one or more wireless and wired communication interfaces, displays, keypads, touch screens, touch pads, voice recognition, facial or AI-enabled image recognition. , one or more cameras or camera inputs, audio inputs, power sources, or various combinations. A processor can be embedded within the media processing system, provided separately from the media processing system, or in combination. A processor may also be implemented as digital logic stored solely within services such as APIs, network services such as Amazon Cloud services, or a combination thereof. Other forms of processors that may be deployed within the scope of this disclosure are described herein by way of example.
メディア処理システム内で使用することができる様々なソフトウェア態様は、Pythonプログラムされたアプリケーションを有するLinux(登録商標)オペレーティングシステム、OpenCV画像処理ライブラリ、AWS Greengrass MLモデル開発および実行、OpenCV画像処理ライブラリおよびPythonプログラミングを使用するビデオ編集ソフトウェアを含むことができる。ビデオストレージ用のAWS
S3およびAWS Glacier、ならびにコンテンツ配送および配信用のAWS Cloudを含む、ビデオの記憶、送信、およびアクセスのための様々なクラウドサービスを使用することができる。ビデオを処理および編集するためのクラウドサービスは、AWS EC2サーバ上で実行されるPythonおよびOpenCVを含むことができる。ビデオをあるフォーマットから別のフォーマットに変換するためのクラウドサービスは、AWS Elemental MediaConvertを含み得る。
Various software aspects that can be used within the media processing system include a Linux operating system with Python programmed applications, OpenCV image processing libraries, AWS Greengrass ML model development and execution, OpenCV image processing libraries and Python May include video editing software using programming. AWS for video storage
Various cloud services can be used for video storage, transmission, and access, including S3 and AWS Glacier, and AWS Cloud for content delivery and distribution. Cloud services for processing and editing videos may include Python and OpenCV running on AWS EC2 servers. Cloud services for converting videos from one format to another may include AWS Elemental MediaConvert.
本明細書で開示される自律型メディア処理システムおよびプロセッサの実施形態はまた、一般にAIロジックとして説明される人工知能(AI)またはAIロジック、機械学習、およびニューラルネットワークを使用する。AIまたはAIロジックは、システムおよびプロセッサが人間の能力を模倣することを可能にする技術のいくつかのカテゴリを含む。AI技術またはロジックは、機械学習、音声言語処理、エキスパートシステム、およびロボット工学を含む。機械学習は、コンピュータが経験を通じてタスクを改善することを可能にするAIのサブセットである。機械学習は、回帰分析などの従来の統計ベースの手法、およびディープラーニングなどのより新しい技術を含む。深層学習は、新しいデータに関する結論を引き出すためにマルチレベルニューラルネットワークを訓練するために大量の履歴データを使用する。本明細書全体で、説明はまた、ニューラルネットワークの形態で深層学習を展開するAIロジックを使用して、オブジェクトのクラス、ビデオ画像内のオブジェクト位置およびセグメントを識別する。深層学習はまた、複数のビデオフレームを含むビデオ画像およびビデオセグメント内の他と異なるアクティビティまたはサブアクティビティを識別するために使用される。いくつかの形態では、ビデオ画像およびセグメント内のオブジェクトの動きまたは方向を特徴付けるために、統計ベースの機械学習が使用される。 Embodiments of the autonomous media processing systems and processors disclosed herein also employ artificial intelligence (AI) or AI logic, commonly described as AI logic, machine learning, and neural networks. AI or AI logic includes several categories of techniques that allow systems and processors to mimic human abilities. AI techniques or logic include machine learning, spoken language processing, expert systems, and robotics. Machine learning is a subset of AI that allows computers to improve tasks through experience. Machine learning includes traditional statistics-based techniques such as regression analysis, as well as newer techniques such as deep learning. Deep learning uses large amounts of historical data to train multilevel neural networks to draw conclusions about new data. Throughout this specification, the description also uses AI logic that deploys deep learning in the form of neural networks to identify classes of objects, object positions and segments within video images. Deep learning is also used to identify distinct activities or subactivities within video images and video segments that include multiple video frames. In some forms, statistics-based machine learning is used to characterize motion or orientation of objects within video images and segments.
本明細書で開示されるAIまたはAIロジックはまた、AIロジックおよびAIジェスチャ認識ロジックを作成するためにニューラルネットワークを生成するためのクラウドサービスを含むことができ、それだけに限らないが、Keras/TensorFlow開発フレームワークを含む機械学習モデルを構築、訓練、チューニング、および評価するためのAWS SageMaker、ならびに1つまたは複数のAIロジック位置に配備するためのモデルを準備するためのSagemaker NEOを含むことができる。 AI or AI logic disclosed herein may also include, but is not limited to, cloud services for generating neural networks to create AI logic and AI gesture recognition logic, including Keras/TensorFlow development. AWS SageMaker for building, training, tuning, and evaluating machine learning models, including frameworks, and Sagemaker NEO for preparing models for deployment to one or more AI logic locations.
ここで、自律型メディア処理システムおよび方法の様々な実施形態をより十分に説明する。これらの例示的な態様の各々は、本開示が徹底的であり、本発明の概念、特徴および利点の範囲を当業者に完全に伝えるように提供される。この目的のために、本開示に関連する態様の各々の完全な理解を提供するために、システムに関連する特定の構成要素および方法の例など、多数の特定の詳細が記載される。しかしながら、当業者には明らかであるように、本明細書に記載されたすべての特定の詳細を使用する必要はなく、例示的な態様は多くの異なる形態で具体化されてもよく、したがって、本開示の範囲を限定するように解釈または解釈されるべきではない。 Various embodiments of autonomous media processing systems and methods will now be described more fully. Each of these exemplary embodiments is provided so that this disclosure will be thorough, and will fully convey the scope of the concepts, features, and advantages of the invention to those skilled in the art. To this end, numerous specific details are set forth, such as examples of specific components and methods associated with the system, in order to provide a thorough understanding of each of the aspects related to this disclosure. However, as will be apparent to those skilled in the art, it is not necessary to use all the specific details set forth herein, and the example embodiments may be embodied in many different forms, such as: It should not be interpreted or construed to limit the scope of this disclosure.
様々な実施形態は、メディアまたはデジタルメディアを作成するために使用されるビデオ、オーディオ、およびコンテンツのキャプチャ、処理、配信、および使用を開示する。本明細書で開示される実施形態は、デジタルメディアをキャプチャ、処理、配信、および消費するための自律型およびAI対応のシステム、デバイス、方法、アプリケーション、ソフトウェア、ハードウェア、ならびに場所を含む。本明細書に開示されるように、デジタルメディアは、機械可読フォーマットで符号化された任意の媒体を意味することができる。デジタルメディアは、デジタル電子デバイス上で作成、閲覧、配信、修正、聴取、および保存することができる。デジタルメディアは、スクリーンまたはスピーカを介してブロードキャストされ、インターネットまたはデジタル通信媒体を介して送信されるテキスト、オーディオ、ビデオ、およびグラフィックを含むことができる任意の情報を指す。デジタルメディアの例には、ソフトウェア、デジタル画像、デジタルビデオ、ビデオゲーム、ウェブページおよびウェブサイト、ソーシャルメディア、デジタルデータおよびデータベース、MP3などのデジタルオーディオ、電子文書および電子書籍が含まれる。本明細書で開示されるように、メディアおよびデジタルメディアは、本明細書全体を通して使用され、異なるものとして明示的に指定されない限り、それらは上記のように参照されるべきである。 Various embodiments disclose the capture, processing, distribution, and use of video, audio, and content used to create media or digital media. Embodiments disclosed herein include autonomous and AI-enabled systems, devices, methods, applications, software, hardware, and locations for capturing, processing, distributing, and consuming digital media. As disclosed herein, digital media can refer to any media that is encoded in a machine-readable format. Digital media can be created, viewed, distributed, modified, listened to, and stored on digital electronic devices. Digital media refers to any information that can include text, audio, video, and graphics that is broadcast through a screen or speakers and transmitted over the Internet or digital communication media. Examples of digital media include software, digital images, digital video, video games, web pages and websites, social media, digital data and databases, digital audio such as MP3, electronic documents, and electronic books. As disclosed herein, media and digital media are used throughout this specification and unless explicitly specified as different, they should be referred to as above.
ここで図1を参照すると、自律型メディア処理システムが開示されている。概して100に示される自律型メディア処理システム(AMPS)は、リモートメディアシステム(RMS)102と、ネットワークメディア処理および管理サービス(NMS)104と、メディア対応宛先106とを含む。AMPS100は、RMS102にアクセス可能なリモートAIロジック110を含むことができるAIロジック108をさらに含む。AIロジック108はまた、NMS104にアクセス可能なネットワークAIロジック112を含む。AIロジック108の一部またはすべては、リモートAIロジック110またはネットワークAIロジック112のいずれかまたは両方に記憶することができる。 Referring now to FIG. 1, an autonomous media processing system is disclosed. An autonomous media processing system (AMPS), shown generally at 100, includes a remote media system (RMS) 102, a network media processing and management service (NMS) 104, and a media-enabled destination 106. AMPS 100 further includes AI logic 108, which may include remote AI logic 110 that is accessible to RMS 102. AI logic 108 also includes network AI logic 112 that is accessible to NMS 104 . Some or all of the AI logic 108 may be stored in either or both remote AI logic 110 or network AI logic 112.
一態様によれば、AIロジック108は、展開されている使用分野に固有のAIロジックを生成するために使用することができる画像データの以前の録画に基づいて生成された学習済みロジックを含むことができる。例として、AMPS100は、1つまたは複数のゴルフコースとともに使用することができ、AIロジックを作成して、AIロジック108としてAIゴルフロジックを生成することができる。したがって、AIゴルフロジックは、ゴルフに使用されるように設計されたAIロジックの要素を有するAIロジックを含むことができる。例えば、AIゴルフロジックは、特定のプレーヤ、衣服、機器、ゴルフコースまたはその環境に関連する他のアイテムを識別するために使用することができるオブジェクトを含むことができる。例えば、AIゴルフロジックは、人、ゴルフクラブを保持する人またはゴルファー、シャツ、シャツの色、帽子、帽子の色、ゴルフグローブ、ゴルフシューズ、ゴルフカート、ゴルフカート内の人、ゴルフボール、ゴルフティー、ゴルフクラブ、アイアン、ドライバ、ユーティリティクラブ、パター、ウェッジ、1番アイアン、2番アイアン、3番アイアン、4番アイアン、5番アイアン、6番アイアン、7番アイアン、8番アイアン、9番アイアン、ウェッジ、ピッチングウェッジ、ギャップウェッジ、サンドウェッジ、ゴルフボールのロゴ、男性、女性、子供、若者、左利きのゴルファー、右ゴルファー、シャツ、ロゴ、キャディ、マーシャル、Callaway、Taylor-Made、Titleist、Mizunoなどの機器ブランドを含むことができる。必要または要求に応じて、AIロジック108内で様々な他のオブジェクトを識別することができる。 According to one aspect, the AI logic 108 includes learned logic generated based on previous recordings of image data that can be used to generate AI logic specific to the field of use being deployed. Can be done. By way of example, AMPS 100 can be used with one or more golf courses to create AI logic and generate AI golf logic as AI logic 108 . Accordingly, AI golf logic may include AI logic having elements of AI logic designed to be used in golf. For example, AI golf logic may include objects that can be used to identify a particular player, clothing, equipment, other items associated with the golf course or its environment. For example, AI golf logic can include: a person, a person or golfer holding a golf club, a shirt, the color of the shirt, a hat, the color of the hat, a golf glove, golf shoes, a golf cart, a person in a golf cart, a golf ball, a golf tee. , golf clubs, irons, drivers, utility clubs, putters, wedges, 1-iron, 2-iron, 3-iron, 4-iron, 5-iron, 6-iron, 7-iron, 8-iron, 9-iron , wedges, pitching wedges, gap wedges, sand wedges, golf ball logos, men, women, children, youth, left-handed golfers, right-handed golfers, shirts, logos, caddies, marshals, Callaway, Taylor-Made, Titleist, Mizuno, etc. equipment brands. Various other objects may be identified within the AI logic 108 as needed or desired.
別の態様によれば、AIロジック108は、ゴルフコース、ゴルフホール、および周囲環境で使用されるオブジェクトを含むことができる。例えば、AIロジック108は、ティーボックス、ティーボックスの色、ゴルフカート、木、フェアウェイ、カートパス、グリーン、ホール、ピン、サンドバンカー、ウォーターハザード、グラスハザード、アウトオブバウンズ、ラフ、グリーンの最初のカット、グリーンの2番目のカット、鳥、昆虫、動物、ティーからピンまでの距離、ティーからグリーンの前部までの距離、ティーからグリーンの中間部までの距離、ティーからグリーンの後部までの距離、レッドステークス、ホワイトステークス、ブルーステークス、イエローステークス、レッドライン、ホワイトライン、イエローライン、標高の変化、雲、雨、雪、霧、もや、泥、風、グリーンのトポロジー、ホールのカット、保守要員、芝刈り機、リーフブロワー、レーキ、サンドレーキ、またはゴルフコースでキャプチャされたビデオまたは画像を処理するために使用するためにAIロジック108によって識別および追加および使用することができる様々な他のオブジェクトを含むことができる。 According to another aspect, AI logic 108 may include golf courses, golf holes, and objects used in the surrounding environment. For example, the AI logic 108 can determine the tee box, tee box color, golf cart, tree, fairway, cart path, green, hole, pin, sand bunker, water hazard, grass hazard, out of bounds, rough, first of the green, etc. cut, second cut of the green, birds, insects, animals, distance from the tee to the pin, distance from the tee to the front of the green, distance from the tee to the middle of the green, distance from the tee to the back of the green , Red Stakes, White Stakes, Blue Stakes, Yellow Stakes, Red Line, White Line, Yellow Line, Elevation Change, Clouds, Rain, Snow, Fog, Haze, Mud, Wind, Green Topology, Hole Cut, Maintenance Personnel, lawn mowers, leaf blowers, rakes, sand rakes, or various other objects that can be identified and added and used by the AI logic 108 for use in processing video or images captured on the golf course. can include.
オブジェクト識別に加えて、AIロジック108は、ビデオ内で生成されたジェスチャを識別するように構成することもできる。ジェスチャロジック、またはジェスチャ認識は、一連の画像フレームを処理し、画像フレームをジェスチャロジックを有するAIロジック108と比較することによって、AIロジック108を使用して識別することができる。ジェスチャロジックはAIロジック108として説明されているが、ジェスチャロジックは単独で、またはAIロジック108内の他のオブジェクトと組み合わせて提供することができることを理解することができる。ジェスチャロジックの例は、ゴルフジェスチャに限定されず、ジェスチャとして定義される様々な画像フレームを含むことができる。例えば、ゴルフのためのジェスチャロジックは、ショット前ジェスチャルーチン、ショットまたはスイングジェスチャ、およびショット後ジェスチャを含むことができる。 In addition to object identification, AI logic 108 may also be configured to identify gestures generated within the video. Gesture logic, or gesture recognition, can be identified using AI logic 108 by processing a series of image frames and comparing the image frames to AI logic 108 with gesture logic. Although gesture logic is described as AI logic 108, it can be appreciated that gesture logic can be provided alone or in combination with other objects within AI logic 108. Examples of gesture logic are not limited to golf gestures, but can include various image frames defined as gestures. For example, gesture logic for golf may include a pre-shot gesture routine, a shot or swing gesture, and a post-shot gesture.
一態様によれば、スイングジェスチャは、ティーボックス上のゴルファーを識別すること、練習スイング、他のゴルファーと話しているゴルファー、ピンまでの距離を見ているゴルファー、ボールをティーにセットするゴルファー、ボールの後ろに進むゴルファー、スイングのために整列しているゴルファー、ボールにアドレスしているゴルファー、ゴルフカートを引き上げること、ゴルファーが歩くこと、バッグを運ぶゴルファー、カート上のゴルファーがバッグを押すこと、カート上のゴルファーがバッグを引くこと、キャディとともに歩くゴルファー、スコアカードを見直すゴルファー、またはAIロジック108に学習および追加することができる様々な他のショット前ジェスチャを含むことができる。 According to one aspect, the swing gesture includes identifying a golfer on a tee box, a practice swing, a golfer talking to another golfer, a golfer looking at the distance to the pin, a golfer setting a ball on a tee, Golfer walking behind the ball, golfer lining up for a swing, golfer addressing the ball, pulling up a golf cart, golfer walking, golfer carrying a bag, golfer on cart pushing bag , a golfer on a cart pulling a bag, a golfer walking with a caddy, a golfer reviewing a scorecard, or a variety of other pre-shot gestures that can be learned and added to the AI logic 108.
AIロジック108内に含めることができる追加のジェスチャロジックは、ゴルファーのショットに関連するジェスチャを含むことができ、以下のものに限定されないが、バックスイング、ダウンスイング、ボールとの接触、ボールをミスすること、ボールを飛ばすこと、ボールをトッピングすること、ボールをダフること、ボールをトップすること、ボールをシャンクすること、ボールをフックすること、ボールをスライスすること、ボールをポップアップすること、ボールをプルすること、ボールをプッシュすること、ボールを真っ直ぐに打つこと、ボールを低く打つこと、ボールを高く打つこと、グリーンに着地するボール、サンドに着地するボール、ウォーターに着水するボール、ラフに着地するボール、アウトオブバウンズに着地するボール、木に当たるボール、ピンに当たるボール、カートパスに当たるボール、ゴルファー/人に当たるボール、パッティング、強すぎるパッティング、弱すぎるパッティング、左へのパッティング、右へのパッティング、グリーンを越えてボールを打つこと、グリーンの手前にボールを打つこと、グリーンの左にボールを打つこと、グリーンの手前にボールを打つこと、グリーンの右にボールを打つこと、またはAIロジック108に学習および追加され得る様々な他のショットジェスチャを含む。 Additional gesture logic that may be included within the AI logic 108 may include gestures related to the golfer's shot, including, but not limited to, backswing, downswing, contact with the ball, and missed ball. to hit the ball, to top the ball, to duff the ball, to top the ball, to shank the ball, to hook the ball, to slice the ball, to pop the ball, Pulling the ball, pushing the ball, hitting the ball straight, hitting the ball low, hitting the ball high, the ball landing on the green, the ball landing on the sand, the ball landing on the water, Ball landing in the rough, ball landing out of bounds, ball hitting a tree, ball hitting a pin, ball hitting a cart path, ball hitting a golfer/person, putting, putting too hard, putting too weak, putting to the left, putting to the right putting, hitting the ball over the green, hitting the ball short of the green, hitting the ball left of the green, hitting the ball short of the green, hitting the ball right of the green, or AI. Includes various other shot gestures that may be learned and added to logic 108.
さらなる態様によれば、AIロジック108はまた、識別することができるショット後ジェスチャを有するゴルフロジックを含むことができる。ショット後ジェスチャは、以下のものに限定されないが、クラブを叩く、クラブを投げる、ゴルファーがハイタッチをする、ゴルファーが拳を握る、ゴルファーが腕を空中に挙げる、ゴルファーが拳を突き動かす、ゴルファーが走る、ゴルファーがジャンプする、ゴルファーがうつむく、ゴルファーが叫ぶ、ゴルファーがティーを取る、ゴルファーがまっすぐ前に歩く、ゴルファーが拍手する、ゴルファーが笑う、またはAIロジック108に学習および追加され得る様々な他のショット後ジェスチャを含み得る。 According to further aspects, the AI logic 108 may also include golf logic with identifiable post-shot gestures. Post-shot gestures include, but are not limited to, hitting the club, throwing the club, the golfer high-fiving, the golfer clenching his fist, the golfer raising his arms in the air, the golfer pumping his fist, the golfer running, golfer jumping, golfer looking down, golfer shouting, golfer teeing up, golfer walking straight ahead, golfer clapping, golfer laughing, or various others that can be learned and added to the AI logic 108. may include a post-shot gesture.
さらなる態様によれば、オブジェクトおよびジェスチャ認識を有するAIロジック108を使用して、ゴルファーのスイングの運動学的側面を識別することができる。AIロジック108を使用して、オブジェクト認識ロジックおよびジェスチャ認識ロジックを使用して、ゴルファーがゴルフボールを打っている間に行った可能性のあるゴルフスイングの種類を識別することができる。例えば、AIロジック108のオブジェクトを使用して、ゴルフクラブ、腕、脚、腰、ゴルフクラブ、ティーボックス、またはゴルファーに関連する他のオブジェクトを識別することができる。AIロジック108のジェスチャロジックをオブジェクトロジックとともに使用して、クラブの経路、腕、脚、腰、手首、ゴルフクラブ、ゴルフボールの動き、ボールの発射角度、ボールの速度、ボールのスマッシュ係数、ボールのサイドスピン、打撃されたボールの頂点、ならびにゴルファー、クラブ、およびボールの様々な他のジェスチャアクティビティを識別することができる。次いで、得られた分析を、ゴルファーまたはティーチングプロがゴルファーのスイングを分析するのを支援するための教示機会として使用することができる。図示されていないが、AIロジック108を使用して識別された各オブジェクト、ジェスチャ、または組合せは、オブジェクト、ジェスチャ、運動学、またはそれらの組合せを識別することが後続のメディアおよびビデオ処理のために提供され得るように、AMPS100によってキャプチャされたビデオを有するメタデータまたはラベルとして提供され得る。 According to further aspects, AI logic 108 with object and gesture recognition can be used to identify kinematic aspects of a golfer's swing. AI logic 108 may be used to identify the type of golf swing a golfer may have made while hitting a golf ball using object recognition logic and gesture recognition logic. For example, objects in AI logic 108 may be used to identify a golf club, arms, legs, hips, golf club, tee box, or other objects associated with a golfer. Gesture logic in AI Logic 108 is used with object logic to determine club path, arms, legs, hips, wrists, golf club, golf ball movement, ball launch angle, ball velocity, ball smash factor, ball Side spin, the apex of the ball being hit, and various other gestural activities of the golfer, club, and ball can be identified. The resulting analysis can then be used as a teaching opportunity to assist a golfer or teaching professional in analyzing the golfer's swing. Although not shown, each object, gesture, or combination identified using AI logic 108 can identify the object, gesture, kinematics, or combination thereof for subsequent media and video processing. As may be provided, metadata or labels may be provided with the video captured by AMPS 100.
ゴルフロジックを有するAIロジック108を使用するものとして説明したが、ゴルフアクティビティ、フットボールアクティビティ、サッカーアクティビティ、野球アクティビティ、バスケットボールアクティビティ、スキーアクティビティ、スノーボードアクティビティ、自転車アクティビティ、釣りアクティビティ、ボートアクティビティ、一般スポーツアクティビティ、または地理的位置で発生するように予め決定された様々な他のタイプの非スポーツアクティビティを含むがこれらに限定されない様々な他の活動、ロジック、およびジェスチャがAMPS100によって使用され得ることを理解することができる。AIロジック108は、アクティビティにとって重要な、または関連するオブジェクトを含むことができる。例えば、AIロジック108は、フットボールアクティビティを検出するために使用することができ、フットボールのフィールドで使用して、フットボールのプレーヤの番号および名前のオブジェクトを検出することができ、ビデオは、プレーヤ名またはプレーヤ番号に固有のビデオの識別を支援するために使用して処理することができる。AMPS100が使用されているアクティビティまたは環境に応じて、フットボールまたは他のアクティビティのための様々な他のオブジェクトをAIロジック108によって提供することができる。 Although it has been described that the AI logic 108 having golf logic is used, golf activities, football activities, soccer activities, baseball activities, basketball activities, ski activities, snowboard activities, bicycle activities, fishing activities, boat activities, general sports activities, or understand that various other activities, logic, and gestures may be used by the AMPS 100, including but not limited to various other types of non-sporting activities that are predetermined to occur at a geographic location. Can be done. AI logic 108 may include objects that are important or related to the activity. For example, AI logic 108 can be used to detect football activity, can be used on a football field to detect objects for football player numbers and names, and videos can be used to detect football player numbers and names. Player numbers can be used and processed to assist in unique video identification. Depending on the activity or environment in which AMPS 100 is being used, various other objects for football or other activities may be provided by AI logic 108.
上述したように、AMPS100は、画像データセットに基づく機械学習およびオブジェクト/ジェスチャ識別が可能なAIを使用するように構成され得る。画像データセットは、AIが画像またはビデオから自動的に識別することができるオブジェクト、アクティビティ、ジェスチャなどを以前に識別したセットである。画像データセットは、既知のオブジェクトおよび/または動きのリストを含むことができ、AMPS100によるキャプチャ画像に基づいて閾値数の既知のオブジェクトを識別するために使用することができ、画像データセットが定義された後に手動/人間の識別を必要とせずに、データセット内の既知のオブジェクトのさらなるインスタンスをAMPS100によって自動的に識別することができる。本明細書を通して説明されるAMPS100およびAIロジックは、ビデオの態様を自律的に自動的に検出するように構成されることが理解されよう。AMPS100はまた、オーディオ入力、センサ入力、データ入力、音声入力、レーダ入力、またはAMPS100への入力を検出するために使用できる様々な他の形態のサポートAIロジックなどの他の形態の入力をサポートできるAIロジックを含むことができる。RMS102は、AIロジック108を使用してキャプチャされたビデオを初期化、録画、処理、および配信するために使用することができる様々な形態の入力を含むことができる。例えば、RMS102を使用して、ゴルフなどの特定のスポーツイベントを識別し、特定のゴルファーのビデオの録画を初期化することができる。RMS102は、ゴルフ用に特別に作成されたリモートAIロジック110などのAIロジック108にアクセスすることができる。AIロジック108を使用してゴルファーを識別すると、ビデオをその特定のゴルファーについて録画し、RMS102およびNMS104を使用して処理することができる。ゴルファーがホールをプレイし終えると、AMPS100は、NMS104を使用してゴルファーのビデオの最終生成を開始し、ゴルファーのモバイルデバイスまたはスマートフォンなどのメディア対応宛先106にデジタルメディアを通信することができる。一態様によれば、最終的に生成されたビデオは、ゴルファー、彼らの名前、彼らがプレイしているコースの名前、ホール番号、コースのロゴ、およびビデオ中にボールが移動した場所の経路をオーバーレイするグラフィカルボールトレースを含むショットのゴルファー統計を含むことができる。このようにして、ビデオ映像を録画、生成、および配信するために人間の介入を必要とせず、それによってビデオ生成の効率を高めながら、グラフィックおよびフォーマットが強化された最終生成ビデオの作成に関連する時間およびコストを削減することができる。 As mentioned above, AMPS 100 may be configured to use AI capable of machine learning and object/gesture identification based on image datasets. An image dataset is a previously identified set of objects, activities, gestures, etc. that the AI can automatically identify from an image or video. The image dataset may include a list of known objects and/or movements and may be used to identify a threshold number of known objects based on images captured by the AMPS 100, and the image dataset may be defined. Further instances of known objects within the data set can be automatically identified by the AMPS 100 without the need for manual/human identification afterward. It will be appreciated that the AMPS 100 and AI logic described throughout this specification are configured to autonomously and automatically detect aspects of the video. AMPS 100 can also support other forms of input, such as audio input, sensor input, data input, voice input, radar input, or various other forms of support AI logic that can be used to detect input to AMPS 100. May include AI logic. RMS 102 can include various forms of input that can be used to initialize, record, process, and distribute captured video using AI logic 108. For example, RMS 102 may be used to identify a particular sporting event, such as golf, and to initiate recording of a video of a particular golfer. RMS 102 may access AI logic 108, such as remote AI logic 110 created specifically for golf. Once a golfer is identified using AI logic 108, video can be recorded for that particular golfer and processed using RMS 102 and NMS 104. Once the golfer has finished playing a hole, AMPS 100 may begin final generation of the golfer's video using NMS 104 and communicate the digital media to a media-enabled destination 106, such as the golfer's mobile device or smartphone. According to one aspect, the final generated video shows the golfer, their name, the name of the course they are playing, the hole number, the course logo, and the path of where the ball traveled during the video. Golfer statistics for the shot may be included, including overlaying graphical ball traces. In this way, no human intervention is required to record, generate, and distribute video footage, thereby increasing the efficiency of video generation, while providing graphics- and format-enhanced final generated video related to the creation of Time and cost can be reduced.
さらなる態様によれば、メディア対応宛先106は、NMS104から受信されたデジタルメディアまたはNMS104からストリーミングされているデジタルメディアを表示することができる様々なタイプのデバイスを含むことができる。例えば、メディア対応宛先106は、NMS104によって記憶されたビデオへのリンクを受信し、ビデオを再生するためのリンクを選択することができるスマートフォンまたは他のモバイルデバイスなどのモバイルデバイス(明示的には図示せず)を含むことができる。メディア対応宛先106はまた、宛先においてデジタルメディアをダウンロードおよび記憶することもできる。例えば、メディア対応宛先106は、NMS104によって生成されたデジタルメディアを再生することができるインスタグラム、フェイスブック、スナップチャット、ツイッターなどのソーシャルメディアサービスプロバイダなどのウェブベースのサービスを含むことができる。一形態では、ビデオへのリンクは、NMS104によって作成され、ソーシャルメディアサービスに通信することができる。他の形態では、Youtube、Disney+、ESPN+、Fox Sports、および他のストリーミングサービスなどのサービスからのビデオ要求は、ビデオの保存を可能にすることができる。いくつかの形態では、ビデオは、メディア対応宛先106に配信する前にフォーマットされる必要があり得る。さらなる態様によれば、NMS104は、メディア対応宛先106によってアクセスされ得るデジタルメディアチャネルを提供することができ得る。例えば、NMS104は、ゴルフチャネル、スキーチャネル、釣りチャネル、またはAMPS100を使用して作成された特定のタイプのデジタルメディアを有する他のスポーツチャネルなどの特定のスポーツチャネルを作成することができる。したがって、NMS104は、AMPS100によって作成されたデジタルメディアの最終用途に応じて、様々な形態のデジタルメディアを提供し、デジタルメディアを1つまたは複数のメディア対応宛先106に出力することができる。 According to further aspects, media-enabled destinations 106 may include various types of devices that can display digital media received from or being streamed from NMS 104. For example, the media-enabled destination 106 can be configured on a mobile device (not explicitly shown in the figure), such as a smartphone or other mobile device, that can receive a link to a video stored by the NMS 104 and select the link to play the video. (not shown). Media-enabled destination 106 can also download and store digital media at the destination. For example, media-enabled destinations 106 may include web-based services such as social media service providers such as Instagram, Facebook, Snapchat, Twitter, etc. that can play digital media generated by NMS 104. In one form, a link to the video can be created by the NMS 104 and communicated to the social media service. In other forms, video requests from services such as YouTube, Disney+, ESPN+, Fox Sports, and other streaming services may enable video storage. In some forms, the video may need to be formatted before being delivered to media-enabled destination 106. According to further aspects, NMS 104 may be capable of providing digital media channels that may be accessed by media-enabled destinations 106. For example, NMS 104 may create a particular sports channel, such as a golf channel, ski channel, fishing channel, or other sports channel that has a particular type of digital media created using AMPS 100. Accordingly, NMS 104 may provide various forms of digital media and output digital media to one or more media-enabled destinations 106, depending on the end use of the digital media created by AMPS 100.
次に図2を参照すると、リモートメディアキャプチャシステム(RMS)を示すブロック図が開示されている。概して200に示されるリモートメディアキャプチャシステム(RMS)は、ローカルビデオカメラを処理および制御するためのNVIDIA Jetson AGX Xavierを含むことができるプロセッサおよびメモリ202を含む。Jetson AGX Xavierの仕様は、本出願の出願日現在のhttps://developer.nvidia.com/embedded/jetson-agx-xavier-developer-kitで見ることができる。複数のコンピュータが使用されてもよい。ゴルフホールの場合、1つのコンピュータがホールの各端部に配置されてもよい。特定の処理ニーズとして代替のコンピュータシステムを使用することもでき、性能は経時的に変化し得ることが理解されよう。プロセッサ202は、デュアルコアNVIDIA Denver 2 64ビットCPUおよびクアッドコアARM(登録商標)Cortex(登録商標)-A57 MPCoreを含むことができ、メモリ202は、8GB128ビットLPDDR4メモリを含むことができ、32GB eMMCのストレージを含むこともできる。他のプロセッサおよびメモリも必要に応じて使用することができ、性能は経時的に変化し得る。システム200はまた、256個のNVIDIA CUDAコアを有する256コアのNVIDIA Pascal(商標)GPUアーキテクチャを含むことができるAI対応グラフィックプロセッサ216を含むことができる。性能およびニーズが経時的に変化するとともに、他のグラフィックプロセッサが使用されてもよい。RMS200のオペレーティングソフトウェアは、Linux(登録商標)オペレーティングシステム、アプリケーションプログラミング言語としてのPython、およびOpenCV画像処理ライブラリを含むことができる。RMS200は、Amazon Web Services Greengrass MLソフトウェアまたは他のエンドポイントAI処理ソフトウェアもしくはモジュールなどの機械学習デプロイおよび実行ソフトウェアを含むことができるAIロジック218をさらに含む。 Referring now to FIG. 2, a block diagram illustrating a remote media capture system (RMS) is disclosed. A remote media capture system (RMS), shown generally at 200, includes a processor and memory 202 , which can include an NVIDIA Jetson AGX Xavier for processing and controlling a local video camera. The specifications of Jetson AGX Xavier are available at https://developer.as of the filing date of this application. nvidia. com/embedded/jetson-agx-xavier-developer-kit. Multiple computers may be used. In the case of a golf hole, one computer may be placed at each end of the hole. It will be appreciated that alternative computer systems may be used for particular processing needs and performance may vary over time. Processor 202 may include a dual-core NVIDIA Denver 2 64-bit CPU and a quad-core ARM® Cortex®-A57 MPCore, and memory 202 may include 8GB 128-bit LPDDR4 memory, 32GB eMMC It can also include storage. Other processors and memory may be used as needed, and performance may vary over time. System 200 may also include an AI-enabled graphics processor 216, which may include a 256-core NVIDIA Pascal™ GPU architecture with 256 NVIDIA CUDA cores. Other graphics processors may be used as performance and needs change over time. The operating software of RMS 200 may include the Linux operating system, Python as an application programming language, and the OpenCV image processing library. RMS 200 further includes AI logic 218, which may include machine learning deployment and execution software, such as Amazon Web Services Greengrass ML software or other endpoint AI processing software or modules.
さらなる態様によれば、RMS200は、プロセッサ202と通信する1つまたは複数のリモートカメラ204を含むことができる。後述するように、リモートカメラ204は、ネットワークインタフェース(明示的には示されていない)を使用してプロセッサおよびメモリに接続することができる。RMS200は、RMS200のプロセッサ202および他の構成要素に電力を供給するように構成された電源モジュール220をさらに含むことができる。電源モジュール220は、バッテリまたは複合太陽電池の形態であってもよく、ACまたはDC電源への有線接続であってもよい。電源モジュール220は、RMS200によって必要または所望されるように、電源を1つまたは複数の電力レベルに変換するために設けることができる。 According to further aspects, RMS 200 can include one or more remote cameras 204 in communication with processor 202. As discussed below, remote camera 204 may be connected to the processor and memory using a network interface (not explicitly shown). RMS 200 may further include a power supply module 220 configured to power processor 202 and other components of RMS 200. Power module 220 may be in the form of a battery or composite solar cell, and may be a wired connection to an AC or DC power source. Power module 220 may be provided to convert the power source to one or more power levels as needed or desired by RMS 200.
別の態様によれば、リモートカメラ204に電力および通信を提供するために、PoE(Power Over Ethernet(登録商標))インタフェースを使用してリモートカメラ204を接続することができる。光ファイバ、同軸ケーブル、ツイストペア、一本鎖、カスタムケーブル、またはそれらの様々な組合せを含むがこれらに限定されない他の形態の接続も使用することができる。RMS200は、プロセッサ202に接続された通信モジュール214と、必要に応じてセルラモデム、有線モデム、または他の形態のモデムなどのモデムとをさらに含むことができる。一態様では、Peplink MAX BR1 Miniなどのセルラモデムを各コンピュータに(ゴルフホールの各端部に)取り付けることができる。Peplink MAX BR1 Miniの仕様は、本開示の出願日のhttps://download.peplink.com/resources/pepwave_max_br1_mini_lte_datasheet.pdfに記載されている。例えば、通信モジュール214は、インターネットまたはクラウドベースのサービスを接続することができる有線または無線ネットワークで構成することができる。通信モジュール214は、モデムを介して通信するための位置またはアドレスを決定するために使用することができ、プロセッサ202のためのデータまたは命令をさらに受信することができる。セルラモデムまたは固定結線モデムを有する通信モジュール214は、インターネットまたはクラウドなどのネットワークを介してデータを通信または送信するように構成することができ、セルラモデムは、3G、4G、5G、または他の通信規格を使用して通信することができる。他の形態では、通信モジュール214は、イーサネット(登録商標)などの広帯域接続を使用して、または光ファイバ接続を介して、またはそれらの様々な組合せで通信することができる有線モデムとすることができる。 According to another aspect, remote camera 204 can be connected using a Power Over Ethernet (PoE) interface to provide power and communication to remote camera 204. Other forms of connection may also be used including, but not limited to, optical fiber, coaxial cable, twisted pair, single strand, custom cable, or various combinations thereof. RMS 200 may further include a communications module 214 connected to processor 202 and, optionally, a modem, such as a cellular modem, wired modem, or other form of modem. In one aspect, a cellular modem, such as a Peplink MAX BR1 Mini, can be attached to each computer (at each end of the golf hole). The specifications of Peplink MAX BR1 Mini are available at https://download. peplink. com/resources/pepwave_max_br1_mini_lte_datasheet. It is written in pdf. For example, communication module 214 can be configured with a wired or wireless network to which the Internet or cloud-based services can be connected. Communication module 214 can be used to determine a location or address for communicating via a modem and can further receive data or instructions for processor 202. The communication module 214 having a cellular or hardwired modem can be configured to communicate or transmit data over a network such as the Internet or a cloud, and the cellular modem supports 3G, 4G, 5G, or other communication standards. can be used to communicate. In other forms, the communication module 214 can be a wired modem that can communicate using a broadband connection such as Ethernet, or via a fiber optic connection, or various combinations thereof. can.
一態様によれば、RMS200は、録画されているビデオ内の特定のオブジェクトを検出するためにAIロジックを使用して画像データを処理することができるAI対応リモートカメラとしての1つまたは複数のリモートカメラ204をさらに含むことができる。RMS200はまた、リモートカメラ204を使用して録画されているビデオに追加のメディアを追加するためにプロセッサ202によって制御またはアクセスされ得るセンサ入力206およびオーディオ入力208を含むことができる。 According to one aspect, the RMS 200 includes one or more remote cameras as AI-enabled remote cameras that can process image data using AI logic to detect specific objects within the video being recorded. A camera 204 may further be included. RMS 200 may also include sensor inputs 206 and audio inputs 208 that may be controlled or accessed by processor 202 to add additional media to video being recorded using remote camera 204.
RMS200はまた、生または圧縮されたビデオを記憶するためのデジタルメディア記憶モジュール210と、データファイル、動作ファイル、制御ログメタデータ、センサデータ、レーダデータ、セッションデータ、および他の形態のデータまたは情報ファイルを記憶するためのデータ記憶モジュール222とを含むことができる。RMS200は、後述するようにRMS200によって受信されたメディアを処理するように構成されたメディア処理エンジン212をさらに含む。RMS200は、プロセッサ202にアクセス可能なAI対応グラフィック処理エンジン216と、RMS200へのビデオ、オーディオ、およびセンサ入力を処理するために使用できるAIロジック218とをさらに含む。 RMS 200 also includes a digital media storage module 210 for storing raw or compressed video, data files, operational files, control log metadata, sensor data, radar data, session data, and other forms of data or information. and a data storage module 222 for storing files. RMS 200 further includes a media processing engine 212 configured to process media received by RMS 200 as described below. RMS 200 further includes an AI-enabled graphics processing engine 216 that is accessible to processor 202 and AI logic 218 that can be used to process video, audio, and sensor input to RMS 200.
使用中、通信モジュール214を使用して処理し宛先に送信することができるメディアコンテンツをキャプチャし処理するために、RMS200を使用することができる。処理の一部または全部は、RMS200を使用してローカルに実行することができる。しかしながら、他の形態では、リモートカメラ204、メディア処理エンジン212、プロセッサ202、ならびにAI対応グラフィック処理エンジン216およびAIロジック218などのRMS200の様々な部分の間で処理を分割することができる。処理はまた、ビデオ処理に限定されず、センサデータ処理、オーディオ処理、データもしくはメタデータ処理、グラフィック処理、AI処理、圧縮処理、または通信モジュール214を使用してデジタルメディアを出力するために使用することができる様々な他の形態の処理を含むがこれらに限定されない様々な処理の組合せを含むことができる。 In use, RMS 200 can be used to capture and process media content that can be processed and sent to a destination using communication module 214. Some or all of the processing may be performed locally using RMS 200. However, in other configurations, processing may be divided among various parts of RMS 200, such as remote camera 204, media processing engine 212, processor 202, and AI-enabled graphics processing engine 216 and AI logic 218. Processing may also include, but is not limited to, video processing, sensor data processing, audio processing, data or metadata processing, graphics processing, AI processing, compression processing, or use to output digital media using communication module 214. Various combinations of processing may be included, including, but not limited to, various other forms of processing that may be performed.
一態様によれば、RMS200は、通信モジュール214が効率的な方法で宛先にメディアを通信することができるように、メディアを処理および圧縮するために使用することができる。例えば、いくつかのセルラネットワークは、大きなビデオフォーマットまたはファイルを含むメディアをアップロードするための容量が限られている。したがって、RMS200および通信モジュール214は、通信アップロード速度および帯域幅能力を決定し、帯域幅需要が維持されることを保証するためにメディアファイルを圧縮することができる。8Kおよび4Kビデオなどの様々なビデオフォーマットおよびメディアファイルサイズは、セルラネットワークを介して通信するには大きすぎる場合がある。したがって、必要に応じて、より大きなビデオフォーマットおよび解像度をより小さなフォーマットに変換することができる。例えば、4Kビデオは、H.264フォーマットに変換され、HD、UHD、または他のデジタルメディアファイルフォーマットとしてアップロードすることができる。 According to one aspect, RMS 200 can be used to process and compress media so that communications module 214 can communicate the media to a destination in an efficient manner. For example, some cellular networks have limited capacity for uploading media, including large video formats or files. Accordingly, RMS 200 and communication module 214 can determine communication upload speeds and bandwidth capabilities and compress media files to ensure that bandwidth demands are maintained. Various video formats and media file sizes, such as 8K and 4K videos, may be too large to communicate over cellular networks. Therefore, larger video formats and resolutions can be converted to smaller formats if needed. For example, 4K video is H. 264 format and can be uploaded as HD, UHD, or other digital media file formats.
さらなる態様によれば、RMS200は、ゴルフ環境で使用されて、ゴルファーを検出し、処理されたビデオまたはデジタルメディアの形態でゴルファーの活動を録画および通信することができる。ゴルフ環境でのRMS200の使用中、プロセッサ202は、リモートカメラ204を使用してゴルファーのビデオデータを自動的にキャプチャし、AI対応処理エンジン216を使用してビデオを自動的に処理して、自律的に処理されたビデオを作成するように構成され得る。例えば、AI対応処理エンジン216を使用して、ビデオまたは画像フレーム内の人物を検出するために作成されたAIロジック218内のビデオおよびニューラルネットワークからの画像データを使用してゴルファーを検出することができる。ゴルファーを識別すると、RMS200は、その特定のゴルファーのビデオをキャプチャして処理することができる。他の形態では、AIロジック218はまた、RMS200を使用してビデオデータを処理するためのゴルフロジックおよびジェスチャ認識ロジック(明示的には図示せず)機能を含むことができる。例えば、AIロジック218は、ゴルフクラブを保持しているゴルファーを検出することができ、ゴルフクラブがボールを打ったときをさらに検出することができる。このようにして、ゴルファーがゴルフボールを打ったときの時間間隔を識別することができ、録画されたビデオをそれに応じてセグメント化および処理することができる。 According to further aspects, RMS 200 can be used in a golf environment to detect golfers and record and communicate the golfer's activities in the form of processed video or digital media. During use of RMS 200 in a golf environment, processor 202 automatically captures golfer video data using remote camera 204 and automatically processes the video using AI-enabled processing engine 216 to provide autonomous The video may be configured to create a digitally processed video. For example, an AI-enabled processing engine 216 may be used to detect a golfer using image data from a video and neural network within AI logic 218 created to detect a person within a video or image frame. can. Once a golfer is identified, RMS 200 can capture and process video of that particular golfer. In other forms, AI logic 218 may also include golf logic and gesture recognition logic (not explicitly shown) functionality for processing video data using RMS 200. For example, AI logic 218 can detect a golfer holding a golf club and can further detect when the golf club hits a ball. In this way, the time intervals when the golfer hit the golf ball can be identified and the recorded video can be segmented and processed accordingly.
さらなる態様によれば、RMS200は、AIロジック218を使用して、ビデオ、オーディオ、またはセンサ入力を処理することができる。例えば、AIロジック218は、様々なタイプのオブジェクトを検出するために使用することができるオブジェクト識別機能を含むことができる。ビデオ内のオブジェクトを識別すると、AI対応グラフィック処理エンジン216を使用して、識別されたオブジェクトを有するビデオの部分を識別し、その特定のオブジェクトのみを有するビデオセグメントを作成することができる。例として、RMS200をゴルフコースに配備することができ、AIロジック218を使用して赤色などの特定の衣服を有するゴルファーを識別することができる。ゴルファーが赤を着用しているビデオは、ゴルファーがもはやビデオ内にいなくなるまでセグメント化することができる。さらなる態様によれば、AIロジック218は、ゴルフクラブなどのゴルフオブジェクト、およびビデオの画像内の青などの特定の色を着用しているゴルファーを識別することができるゴルフロジックを含むことができる。次いで、RMS200は、ビデオ内のそれらの2つのオブジェクトを有するビデオを処理して、それらのAI検出属性用のセグメントを作成することができる。 According to further aspects, RMS 200 may use AI logic 218 to process video, audio, or sensor input. For example, AI logic 218 can include object identification functionality that can be used to detect various types of objects. Once an object in the video is identified, the AI-enabled graphics processing engine 216 can be used to identify the portion of the video that has the identified object and create a video segment that has only that particular object. As an example, RMS 200 may be deployed on a golf course and AI logic 218 may be used to identify golfers with specific clothing, such as the color red. A video of a golfer wearing red can be segmented until the golfer is no longer in the video. According to further aspects, AI logic 218 may include golf logic that can identify golf objects, such as golf clubs, and golfers wearing a particular color, such as blue, in images of a video. RMS 200 may then process the video with those two objects in the video to create segments for those AI detected attributes.
さらなる態様によれば、RMS200は、ビデオとともに使用される他の感覚情報を処理して、通信モジュール214を使用して結合および通信することができるメディアコンテンツを作成することもできる。例えば、オーディオ入力208は、リモートカメラ204から受信したタイムスタンプ付きビデオファイルと同期しているタイムスタンプ付きデジタルオーディオファイルを出力することができる。例えば、マイクロフォンは、オーディオ入力208に接続されてもよく、打っているボールの音を検出するために、またはゴルフホール上のプレーヤからの音声もしくは他のオーディオを検出するために使用され得るオーディオを入力することができる。次いで、RMS200は、ビデオおよびオーディオファイルを組み合わせて、メディア訴求力が強化されたメディアコンテンツを出力することができる。さらなる態様では、RMS200は、センサ入力データを録画されたビデオに組み合わせて、優れたデジタルメディア体験を作り出すことができる。他の形態では、センサ入力(複数可)は、以下に説明するように、ネットワークサービスによる追加の処理のためにビデオと通信することができるセンサデータファイルに記憶することができる。例えば、気象センサデータなどのセンサデータを取得し、録画されたビデオと組み合わせて使用することができる。センサ入力206は、風速検出機構、温度計、湿度、または他の気象関連コース条件を含むセンサを含むことができる。 According to further aspects, RMS 200 may also process other sensory information used with video to create media content that can be combined and communicated using communication module 214. For example, audio input 208 can output a time-stamped digital audio file that is synchronized with a time-stamped video file received from remote camera 204. For example, a microphone may be connected to audio input 208 and provide audio that may be used to detect the sound of a ball being hit or to detect voice or other audio from a player on a golf hole. can be entered. RMS 200 can then combine the video and audio files to output media content with enhanced media appeal. In a further aspect, RMS 200 can combine sensor input data with recorded video to create a superior digital media experience. In other forms, the sensor input(s) can be stored in a sensor data file that can be communicated with the video for further processing by a network service, as described below. For example, sensor data, such as weather sensor data, can be acquired and used in combination with recorded video. Sensor inputs 206 may include sensors including wind speed sensing mechanisms, thermometers, humidity, or other weather-related course conditions.
別の態様によれば、センサ入力206およびレーダセンサ入力またはレーダユニット入力は、1つまたは複数のリモートカメラ204の視野内を移動するオブジェクトの様々な態様を検知することができる。例えば、ゴルフ用のレーダユニット入力としてのセンサ入力206は、ゴルフスイング、ボール速度、ボール高さ、ボールカーブ、またはRMS200を使用して出力デジタルメディアに追加することができるデータを提供するために使用することができる、またはデジタルメディアをさらに処理し、検出された感知レーダデータを組み合わせることができる別のサービスに通信することができる様々な他の形態のレーダデータ入力を検出することができる。カメラとレーダとの組合せは、ゴルフスイングの様々な側面を感知するためにも使用することができる。例えば、AI対応カメラとして構成されたリモートカメラ204を使用して、録画されたビデオ内の光学ズームおよびピクセル密度を使用してカメラで測定されるように、2つのゴルフボール間の角度の小さな差を識別することができる。位相差を利用して、例えば20GHzレーダや0.6インチ程度の波長のレーダと組み合わせる場合である。カメラ入力およびレーダ入力は、オブジェクトがどこに位置するか、およびAIロジック218を使用してどの種類のオブジェクトを識別できるかに関する情報を共有することができる。例えば、RMS200およびAI対応カメラを使用して、同じタイムスタンプまたは録画された間隔を有するAIロジック218およびレーダ入力を使用してオブジェクトを識別することができる。RMS200は、AI対応グラフィック処理エンジン216およびセンサ入力206に入力されるレーダセンサユニットデータの両方を使用して、ビデオフレーム内の移動オブジェクトの移動特性を提供するために使用することができる。このようにして、レーダ、画像処理、およびAIロジックを利用するインテリジェントレーダ検出システムを、効率的なデジタルメディア処理およびビデオ強化のために展開することができる。 According to another aspect, sensor input 206 and radar sensor input or radar unit input can detect various aspects of objects moving within the field of view of one or more remote cameras 204. For example, the sensor input 206 as a radar unit input for golf may be used to provide information about the golf swing, ball speed, ball height, ball curve, or other data that can be added to the output digital media using the RMS 200. Various other forms of radar data input can be detected, or the digital media can be communicated to another service that can further process and combine the detected sensed radar data. The camera and radar combination can also be used to sense various aspects of the golf swing. For example, using a remote camera 204 configured as an AI-enabled camera, small differences in angle between two golf balls, as measured by the camera using optical zoom and pixel density in the recorded video. can be identified. This is a case where the phase difference is used in combination with, for example, a 20 GHz radar or a radar with a wavelength of about 0.6 inches. Camera and radar inputs can share information about where objects are located and what types of objects can be identified using AI logic 218. For example, an RMS 200 and an AI-enabled camera can be used to identify objects using AI logic 218 and radar inputs that have the same timestamp or recorded interval. RMS 200 may be used to provide movement characteristics of moving objects within a video frame using both AI-enabled graphics processing engine 216 and radar sensor unit data input to sensor input 206. In this way, an intelligent radar detection system that utilizes radar, image processing, and AI logic can be deployed for efficient digital media processing and video enhancement.
別の態様によれば、RMS200は、リモートカメラ204を使用してキャプチャされた画像内のAIオブジェクトを検出するために、リモートカメラ204のうちの1つまたは複数のみを使用することができる。例えば、AIロジック218の一部またはすべてをリモートカメラ204内に記憶することができ、関連する1つまたは複数のオブジェクトを有するビデオをリモートカメラ204によって識別し、その後のビデオを録画してRMS200に通信することができる。AIロジック218を含むカメラでは、後続のビデオ処理のために、ビデオの量を低減して録画し、プロセッサ202に通信する必要があり得る。本明細書で説明するように、様々な形態のAIロジック218をリモートカメラ204内で使用することができる。 According to another aspect, RMS 200 may use only one or more of remote cameras 204 to detect AI objects in images captured using remote cameras 204. For example, some or all of the AI logic 218 can be stored within the remote camera 204 to identify videos with one or more objects associated with the remote camera 204 and record subsequent videos to the RMS 200. Can communicate. Cameras that include AI logic 218 may require a reduced amount of video to be recorded and communicated to processor 202 for subsequent video processing. Various forms of AI logic 218 may be used within remote camera 204 as described herein.
別の態様によれば、RMS200は、RMS200内でローカルにAI処理の一部を使用しなくてもよく、またはその一部のみを使用してもよく、RMS200からリモートのネットワークまたはクラウドベースのAI処理を使用してもよい。例えば、RMS200は、リモートカメラ204を使用してビデオの録画をローカルに開始することができる。次いで、録画されたビデオは、RMS200によってリモート処理システム(例えば、NMS104、NMS400、または他のクラウドサービス)に通信されて、キャプチャされたビデオのAI処理を実行することができる。このようにして、RMS200は、後続のメディア処理のために通信モジュール204を使用して特定のフォーマットサイズを有するメディアを通信するだけでよく、その後、メディアファイルは、通信モジュール204を使用してインターネットまたはクラウドにアップロードすることができる。 According to another aspect, RMS 200 may use no or only some of the AI processing locally within RMS 200, and may use remote network or cloud-based AI processing from RMS 200. Processing may also be used. For example, RMS 200 may locally initiate video recording using remote camera 204. The recorded video can then be communicated by RMS 200 to a remote processing system (eg, NMS 104, NMS 400, or other cloud service) to perform AI processing of the captured video. In this way, RMS 200 only needs to communicate media with a particular format size using communications module 204 for subsequent media processing, and then the media files are transferred to the Internet using communications module 204. Or can be uploaded to the cloud.
さらなる態様によれば、RMS200は、設置されたリモートカメラ204の地理的位置の近くでビデオをローカルに処理して、所望のアクティビティの自動監視および処理を提供することができる。RMS200は、リモートカメラ204の設置された視野に対してローカルな自動検出およびビデオ録画/処理を使用することができ、処理されたビデオは、通信モジュール214を使用して宛先に送信することができる。例えば、処理されたビデオは、中間サーバまたは他の通信デバイス(明示的には図示せず)を介してエンドユーザに受信および転送され得る。RMS200は、キャプチャされたビデオに様々なグラフィック要素を追加するためにビデオを処理することができる。例えば、メディア処理エンジン212を使用して、ゴルフコースの名称、ホール番号、ロゴ情報、センサデータ情報、気象情報、または様々な他の形態のグラフィックデータなどのゴルフホールに関する情報を追加することができる。一態様によれば、ゴルフボールをビデオフレーム内で検出することができ、メディア処理エンジン212は、追加のカラーグラフィックを追加して、打ったゴルフボールのトレースまたは方向、ユーザ情報、コース情報などを示すことができる。他の要素も、本明細書に記載されているようにRMS200を使用して追加することができる。 According to further aspects, RMS 200 may process video locally near the geographical location of installed remote cameras 204 to provide automatic monitoring and processing of desired activities. RMS 200 may use automatic detection and video recording/processing local to the installed field of view of remote camera 204, and the processed video may be transmitted to a destination using communication module 214. . For example, processed video may be received and transmitted to end users via an intermediate server or other communication device (not explicitly shown). RMS 200 can process the video to add various graphical elements to the captured video. For example, media processing engine 212 may be used to add information about golf holes, such as golf course names, hole numbers, logo information, sensor data information, weather information, or various other forms of graphical data. . According to one aspect, a golf ball can be detected within a video frame, and media processing engine 212 adds additional color graphics to indicate a trace or direction of the golf ball hit, user information, course information, etc. can be shown. Other elements may also be added using RMS 200 as described herein.
さらなる態様によれば、RMS200の一部または全部を、1つまたは複数の一体型カメラを有するモバイルデバイスに組み込むことができる。例えば、108MPf/1.8メインカメラ、12MPf/2.2ウルトラワイドカメラ、および2つの10MP望遠カメラ(一方はf/2.4開口および3倍光学ズームを有し、他方はf/4.9開口および巨大な10倍光学ズームを有する)を含む4つの背面カメラを有するSamsung Galaxy S21 Ultraなどの携帯電話をRMS200として使用することができる。 According to further aspects, a portion or all of RMS 200 can be incorporated into a mobile device having one or more integrated cameras. For example, a 108MPf/1.8 main camera, a 12MPf/2.2 ultrawide camera, and two 10MP telephoto cameras (one with f/2.4 aperture and 3x optical zoom, the other f/4.9 A mobile phone such as the Samsung Galaxy S21 Ultra, which has four rear cameras including a large aperture and a huge 10x optical zoom, can be used as the RMS200.
他の形態では、RMS200の一部または全部を、ウルトラワイドf/2.4カメラ、ワイドf/1.6カメラ、および望遠f/2カメラを有する3カメラシステムを含む、Apple製のiPhone(登録商標)12Proなどの携帯電話カメラに組み込むことができる。12MPカメラセンサを有する前面カメラも提供される。モバイルデバイスは、低照度条件用のライダスキャナと、生画像およびビデオファイルを処理するための生ビデオプロセッサとを含む。カメラを有する他の様々なモバイルデバイスもまた、RMS200として実現することができる。 In another form, some or all of the RMS200 can be used with an Apple iPhone, including a three-camera system with an ultra-wide f/2.4 camera, a wide f/1.6 camera, and a telephoto f/2 camera. It can be incorporated into mobile phone cameras such as TM 12Pro. A front camera with a 12MP camera sensor is also provided. The mobile device includes a lidar scanner for low light conditions and a raw video processor for processing raw images and video files. Various other mobile devices with cameras can also be implemented as RMS 200.
次に図3を参照すると、リモートメディアキャプチャシステムとともに使用するためのAI対応カメラが開示されている。一般に300で示されるAI対応カメラは、必要または所望に応じて様々なタイプのカメラとして実現することができ、RMS102、200、710、1136、図6のRMS、または様々な他のリモートメディアシステムとともに使用することができる。 Referring now to FIG. 3, an AI-enabled camera is disclosed for use with a remote media capture system. The AI-enabled camera, generally designated 300, can be implemented as various types of cameras as needed or desired, such as the RMS 102, 200, 710, 1136, the RMS of FIG. 6, or various other remote media systems. Can be used with
一態様によれば、AI対応カメラ300は、HDカメラ、UHDカメラ、4Kカメラ、8Kカメラ、360度カメラ、3Dカメラ、4Dカメラ、拡張現実(AR)カメラ、セキュリティカメラ、Samsung Galaxy s21UltraまたはApple iPhone12Proなどのモバイルデバイス、DJI Spark Quadcopterなどのカメラを有するドローン、携帯電話または他のデバイスに接続可能なGoProカメラ、またはビデオを録画可能な他の様々なデジタル画像キャプチャデバイスを含むことができる。 According to one aspect, the AI-enabled camera 300 is an HD camera, a UHD camera, a 4K camera, an 8K camera, a 360-degree camera, a 3D camera, a 4D camera, an augmented reality (AR) camera, a security camera, a Samsung Galaxy s21Ultra, or an Apple iPhone 12Pro. , a drone with a camera such as a DJI Spark Quadcopter, a GoPro camera that can be connected to a cell phone or other device, or a variety of other digital image capture devices that can record video.
一態様によれば、AI対応カメラ300は、参照により本明細書に組み込まれる仕様および動作マニュアルを有するBoschのモデルMIC IP ultra7100iカメラによって製造されたUHD4Kカメラとすることができる。別の形態では、AI対応カメラ300は、参照により本明細書に組み込まれる仕様および動作マニュアルを有するHanwhaのモデルPNP-9200RHを含むことができる。 According to one aspect, the AI-enabled camera 300 can be a UHD 4K camera manufactured by Bosch's model MIC IP ultra7100i camera, whose specifications and operating manual are incorporated herein by reference. In another form, AI- enabled camera 300 may include a Hanwha model PNP-9200RH, whose specifications and operating manual are incorporated herein by reference.
一態様によれば、AI対応カメラ300は、プロセッサおよびメモリ302と、PTZセンサなどの第1のカメラセンサ304と、光学ズームのみのセンサなどの第2のカメラセンサ306と、様々な異なる画像キャプチャ能力を有する第nのカメラセンサ308として一般的に示される他のセンサ技術とを含むことができる。AI対応カメラ300はまた、録画されたビデオおよび画像を記憶するためのメモリを有するカメラセンサおよびビデオストレージ314の各々を制御するための制御モジュール310を含む。AI対応カメラ300はまた、AIを使用して感知するために使用またはアクティビティに応じてカスタマイズできる組込みAIロジック316を含む。例えば、組込みAIロジック316は、ゴルフホール、プレーヤ、ティーボックス、グリーン、ゴルフボール、または他の様々なオブジェクトの要素を識別することができるAIゴルフロジックを含むことができる。他の設定では、スポーツイベントおよび屋外活動を含むがこれらに限定されないデジタルメディアをキャプチャおよび処理するための使用に応じて、他のオブジェクトを組込みAIロジック316内に提供することができる。組込みAIロジック316として示されているが、AI対応カメラ300は、RMSまたはNMSなどのAIロジック108などのリモートに記憶されたAIロジックにアクセスして、録画された画像またはオブジェクトのAI検出を可能にすることができる。 According to one aspect, the AI-enabled camera 300 includes a processor and memory 302, a first camera sensor 304, such as a PTZ sensor, a second camera sensor 306, such as an optical zoom-only sensor, and a variety of different image capture sensors. Other sensor technologies, generally designated as an nth camera sensor 308, may be included. AI-enabled camera 300 also includes a control module 310 for controlling each of the camera sensors and video storage 314 with memory for storing recorded video and images. AI-enabled camera 300 also includes built-in AI logic 316 that can be customized depending on usage or activity to sense using AI. For example, embedded AI logic 316 may include AI golf logic that can identify elements of golf holes, players, tee boxes, greens, golf balls, or various other objects. In other settings, other objects may be provided within the embedded AI logic 316 for use in capturing and processing digital media, including, but not limited to, sporting events and outdoor activities. Although shown as embedded AI logic 316, AI-enabled camera 300 can access remotely stored AI logic, such as AI logic 108 such as RMS or NMS, to enable AI detection of recorded images or objects. It can be done.
AI対応カメラ300はまた、WiFi、セルラ、イーサネット(登録商標)、PoE、HDMI(登録商標)、RS232、802.11、Bluetooth(登録商標)、またはカスタム通信インタフェースなどの無線および有線通信を含む複数のタイプの通信を使用するように構成することができる通信モジュール318を含む。AI対応カメラ300はまた、必要または要求に応じて、AI対応カメラ300、センサ、およびオーディオマイクに電力を供給するための1つまたは複数の電力レベルを提供するように構成された電源モジュール320を含む。別の実施形態によれば、センサ308は、光学センサを含むことができ、いくつかの形態では、光学、動き、赤外線、レーダもしくはドップラーセンサ、Bluetoothセンサ、WiFiセンサ、RFIDセンサ、またはそれらの様々な組合せを含むがこれらに限定されないセンサの様々なタイプまたは組合せを含むことができ、光検知のみに限定される必要はない。 AI-enabled camera 300 also supports multiple wireless and wired communications, such as WiFi, cellular, Ethernet, PoE, HDMI, RS232, 802.11, Bluetooth, or custom communication interfaces. includes a communications module 318 that can be configured to use types of communications. AI-enabled camera 300 also includes a power supply module 320 configured to provide one or more power levels to power AI-enabled camera 300, the sensors, and the audio microphone as needed or desired. include. According to another embodiment, the sensor 308 can include an optical sensor, and in some forms an optical, motion, infrared, radar or Doppler sensor, Bluetooth sensor, WiFi sensor, RFID sensor, or various thereof. Various types or combinations of sensors may be included, including but not limited to combinations of sensors, and need not be limited to only light sensing.
一態様によれば、AI対応カメラ300は、光学ズームおよびデジタルズームの一方または両方を含むズーム機能を含むように構成されてもよく、AI対応カメラ300がある位置に向けられ得るようにチルトおよびパン機能を有するようにさらに構成されてもよい。例えば、AI対応カメラ300は、ティーオフを試みるゴルファーを有するティーボックスに各々向けられてズームしてもよく、プレイ中の後続のショットのためにゴルファーを追従してズームインするように調整することができる。AIロジックを使用して、カメラは特定のユーザにタグ付けし、プレイ中にユーザを追跡することができる。代替の態様では、AI対応カメラ300は固定視野カメラであってもよい。この態様では、AI対応カメラ300は、その視野内のすべてをキャプチャするように構成することができ、軸に沿って回転されることなくデジタルおよび光学ズーム機能を展開することもできる。 According to one aspect, AI-enabled camera 300 may be configured to include zoom capabilities, including one or both of optical zoom and digital zoom, and tilt and pan so that AI-enabled camera 300 can be directed to a location. It may be further configured to have functions. For example, the AI-enabled cameras 300 may each be directed and zoomed toward a tee box with a golfer attempting to tee off, and may be adjusted to follow and zoom in on the golfer for subsequent shots during play. can. Using AI logic, the camera can tag specific users and track them while they play. In an alternative aspect, AI-enabled camera 300 may be a fixed field of view camera. In this manner, AI-enabled camera 300 can be configured to capture everything within its field of view and can also deploy digital and optical zoom capabilities without being rotated along an axis.
次に図4を参照すると、ネットワークメディア処理および管理サービスを示すブロック図が開示されている。概して400に示されるネットワークメディア処理および管理サービス(NMS)は、クラウドストレージおよびサービス404に接続されたネットワークプロセッサ402を含むことができ、これは、リモートメディアシステム(RMS)450またはデジタルメディアを処理および作成するためのビデオを通信するように構成された任意の他のリモートビデオキャプチャシステムまたはデバイスと通信するように構成された通信インタフェース406に接続されている。NMS400はまた、AI対応グラフィック処理エンジン410と、画像プロセッサ408と、AIロジック412とを含む。ネットワークプロセッサ402は、デジタルメディアおよびサポートのためのリソースを処理、管理、および通信するために、様々なモジュールまたはマネージャにアクセスすることができる。例えば、NMS400は、リモートメディアソースマネージャ414と、セッション作成マネージャ416と、位置プロファイルマネージャ418と、ユーザプロファイルおよび統計マネージャ420とを含むことができる。NMS400はまた、コンテンツ/ファイルマネージャ422と、ビデオプロセスマネージャ424と、ショット追跡モジュール426と、デジタルアセットマネージャ428と、センサデータマネージャ430とを含むことができる。NMS400はまた、フォーマットマネージャ432、出力マネージャ434、およびモバイルアプリマネージャ436の使用を可能にすることができる。NMS400はまた、パフォーマンスマネージャ438、AIロジックマネージャ440、およびコースマネージャ444を含むことができる。NMS400は、配信マネージャ/通信インタフェース446を使用して、デジタルメディアとしてRMS450から受信したビデオをデジタルメディア対応宛先448に出力することができる。 Referring now to FIG. 4, a block diagram illustrating network media processing and management services is disclosed. A network media processing and management service (NMS), shown generally at 400, can include a network processor 402 connected to a cloud storage and service 404, which processes and processes remote media system (RMS) 450 or digital media. A communication interface 406 is configured to communicate with any other remote video capture system or device configured to communicate video for creation. NMS 400 also includes an AI-enabled graphics processing engine 410 , an image processor 408 , and AI logic 412. Network processor 402 can access various modules or managers to process, manage, and communicate digital media and support resources. For example, NMS 400 may include a remote media source manager 414, a session creation manager 416, a location profile manager 418, and a user profile and statistics manager 420. NMS 400 may also include a content/file manager 422, a video process manager 424, a shot tracking module 426, a digital asset manager 428, and a sensor data manager 430. NMS 400 may also enable the use of format manager 432, output manager 434, and mobile app manager 436. NMS 400 may also include a performance manager 438, an AI logic manager 440, and a course manager 444. NMS 400 may output video received from RMS 450 as digital media to digital media-enabled destination 448 using distribution manager/communications interface 446 .
一態様によれば、NMS400はまた、クラウドストレージおよびサービス404に記憶されたビデオおよび画像を処理するように構成されたAI対応グラフィック処理エンジンまたはGPU410およびビデオ/画像プロセッサ408を含むことができる。例えば、GPU410および/または画像プロセッサ408は、様々なタイプのAI対応および画像プロセッサを含むことができ、一形態では、NMS400または本明細書に記載の他のAI対応デバイスまたはAIロジックによって作成、修正、配信および使用することができるAIロジック412用の機械学習(ML)を生成および開発および訓練するためのAI処理が可能な1つまたは複数のNVIDIA V100 Tensor Core GPUを含む。一態様によれば、GPU410および/またはネットワークプロセッサ402はまた、AIロジック412を作成するために追加のソフトウェアおよびサービスを利用することができる。例えば、GPU410は、MLモデルを構築、訓練、チューニング、および評価するために、AWS SageMakerを使用することができる。Sagemakerは、いくつかのML開発フレームワークをサポートし、一態様によれば、Keras/TensorFlowを使用することができる。さらに、NMS400は、Sagemaker NEOを使用して、リモートプロセッサおよびAIロジック位置に配備するためのAIロジック412モデルを準備することができる。ネットワークプロセッサ402は、AIロジックマネージャ440を使用して、通信インタフェース406を使用して複数の場所の1つまたは複数の場所に配信されたAIロジックを管理、配信、更新および削除することができる。例えば、1つまたは複数のゴルフコースは、特定のゴルフホールに対して作成された独立したAIロジック412を有することができる。したがって、AIロジックマネージャ440は、コースごとおよびホールごとに、NMS400によって作成および配信されたAIロジック412のリストおよびバージョン制御を維持することができる。 According to one aspect, NMS 400 may also include an AI-enabled graphics processing engine or GPU 410 and video/image processor 408 configured to process videos and images stored in cloud storage and services 404. For example, GPU 410 and/or image processor 408 can include various types of AI-enabled and image processors, and in one form are created, modified by NMS 400 or other AI-enabled devices or AI logic described herein. , one or more NVIDIA V100 Tensor Core GPUs capable of AI processing to generate and develop and train machine learning (ML) for AI logic 412 that can be distributed and used. According to one aspect, GPU 410 and/or network processor 402 may also utilize additional software and services to create AI logic 412. For example, GPU 410 can use AWS SageMaker to build, train, tune, and evaluate ML models. Sagemaker supports several ML development frameworks and, according to one aspect, can use Keras/TensorFlow. Additionally, NMS 400 can use Sagemaker NEO to prepare AI logic 412 models for deployment to remote processor and AI logic locations. Network processor 402 may use AI logic manager 440 to manage, distribute, update, and delete AI logic distributed to one or more of the plurality of locations using communication interface 406 . For example, one or more golf courses may have independent AI logic 412 created for specific golf holes. Accordingly, AI logic manager 440 may maintain a list and version control of AI logic 412 created and distributed by NMS 400 on a per-course and per-hole basis.
一態様によれば、ネットワークプロセッサ402、画像プロセッサ408および/またはGPU410は、単一のプロセッサと見なされる必要はなく、デジタルメディア、コンテンツ、AIロジック、および本明細書で説明されるような様々な他の出力およびサービスを処理および出力するためにNMS400によってアクセスされ得る複数のプロセッサおよびサービスと見なされるべきである。例えば、ネットワークプロセッサ402は、Amazon Cloud Services、IBM Cloud Services、Microsoft Cloud Services、またはそれらの様々な組合せを使用して配備することができ、可能なネットワーク通信プロトコルを使用して本明細書に開示された複数のマネージャおよびモジュールにアクセスすることができるクラウドサービスとして実現することができる。クラウドストレージおよびサービス404ならびに配信マネージャ/通信インタフェース446はまた、異なるストレージ能力およびアクセス可能性を有する様々なタイプのクラウドストレージサービスおよび配信サービスを含むことができる。例えば、一部のコンテンツは即時アクセスのために記憶されてもよく、他の形態のコンテンツは、ディープストレージ技術を使用して遅延アクセスのために記憶されてもよい。例えば、クラウドストレージおよびサービス404は、クラウドにビデオを記憶するためのAmazon Web Services(AWS)Glacierを含むことができる。さらに、コンテンツ/ファイルマネージャ422および配信マネージャ/通信インタフェース446は、エンドユーザにビデオを配信するコンテンツ配信サービスとしてAWSクラウドフロントを利用することができる。 According to one aspect, network processor 402, image processor 408, and/or GPU 410 need not be considered a single processor, but rather can be used to process digital media, content, AI logic, and various It should be considered multiple processors and services that may be accessed by NMS 400 to process and output other outputs and services. For example, network processor 402 may be deployed using Amazon Cloud Services, IBM Cloud Services, Microsoft Cloud Services, or various combinations thereof, and may be implemented using any of the network communication protocols disclosed herein. It can be implemented as a cloud service with access to multiple managers and modules. Cloud storage and services 404 and distribution manager/communications interface 446 may also include various types of cloud storage and distribution services with different storage capabilities and accessibility. For example, some content may be stored for immediate access, while other forms of content may be stored for delayed access using deep storage techniques. For example, cloud storage and services 404 can include Amazon Web Services (AWS) Glacier for storing videos in the cloud. Additionally, content/file manager 422 and distribution manager/communications interface 446 may utilize AWS Cloudfront as a content distribution service to distribute videos to end users.
さらなる態様によれば、ビデオプロセスマネージャ424を使用して、通信インタフェース406およびRMS450から受信したビデオの後処理を開始することができる。例えば、ビデオを修正または編集して追加のグラフィカルアセットを追加し、フォーマットマネージャ432によって提供される特定のフォーマットを使用してフォーマットすることができる。一形態では、NMS400は、後処理および編集のためにフォーマットマネージャ432を使用することができ、NMS400で動作可能なAWS EC2ウェブサーバ上のビデオを編集するためにPythonおよびOpenCVを使用することができる。NMS400は、配信マネージャ/通信インタフェース446を使用して配信前にビデオを変換またはフォーマットするために、AWS Elemental MediaTransformを利用することもできる。 According to further aspects, video process manager 424 may be used to initiate post-processing of video received from communication interface 406 and RMS 450. For example, the video may be modified or edited to add additional graphical assets and formatted using a particular format provided by format manager 432. In one form, the NMS 400 can use a format manager 432 for post-processing and editing, and can use Python and OpenCV to edit videos on an AWS EC2 web server that can run on the NMS 400. . NMS 400 may also utilize AWS Elemental MediaTransform to transform or format the video prior to distribution using distribution manager/communications interface 446.
動作中、NMS400は、RMS450を使用して録画セッションを開始する要求を受信することができる。例えば、ユーザプロファイルおよび統計マネージャ420内に記憶された有効なユーザプロファイルを有するユーザは、ユーザのモバイルアプリケーションを使用してNMS400に信号を送信することができる。要求は、デジタルメディア対応宛先448またはRMS450から発信され得る。位置プロファイルマネージャ418は、要求を検証するためにユーザプロファイルおよび統計マネージャ420とともに使用することもでき、検証時に、セッション作成マネージャ416によってセッションを作成し、RMS450および関連デバイスを使用して録画セッションをアクティブ化するためにRMS450に送信することができる。セッション作成マネージャ416は、コンテンツ/ファイルマネージャ422を使用してセッションイベントを記憶することができ、有効なセッションを有するRMS450によって有効なビデオアップロードが開始されると、コンテンツ/ファイルマネージャ422は、アップロードを検証することができ、ビデオおよび関連するファイル/データは、クラウドストレージおよびサービス404を使用して記憶することができる。一形態では、ビデオ転送が開始されると、RMSマネージャ414は、イベントの録画を無効にするために無効化イベントをRMS450に送信することができる。このようにして、RMS450におけるリソースの効率的な使用を達成することができ、RMS450へのより少ない量のメモリまたはローカルストレージが必要とされ得る。 In operation, NMS 400 may receive a request to initiate a recording session using RMS 450. For example, a user with a valid user profile stored within user profile and statistics manager 420 may send a signal to NMS 400 using the user's mobile application. The request may originate from digital media enabled destination 448 or RMS 450. Location profile manager 418 may also be used in conjunction with user profile and statistics manager 420 to validate the request, and upon validation, creates a session by session creation manager 416 and activates a recording session using RMS 450 and associated devices. can be sent to RMS 450 for conversion. Session creation manager 416 may use content/file manager 422 to store session events such that when a valid video upload is initiated by an RMS 450 that has a valid session, content/file manager 422 initiates the upload. The videos and associated files/data may be stored using cloud storage and services 404. In one form, once the video transfer is initiated, RMS manager 414 may send an invalidation event to RMS 450 to disable recording of the event. In this way, efficient use of resources in RMS 450 may be achieved and less memory or local storage to RMS 450 may be required.
NMS400がアップロードされたビデオを受信すると、ビデオプロセスマネージャ424は、クラウドストレージおよびサービス内に記憶されたアップロードされたビデオの後処理を開始することができる。例えば、コンテンツ/ファイルマネージャ422は、ビデオアップロードのファイル名および宛先を含むことができ、アップロードされたビデオを処理するために後処理情報をさらに取得することができる。例えば、アップロードされたビデオは、コース名、場所、ホール番号、ユーザまたはゴルファーの名前、日付およびタイムスタンプ、GPSデータ、ファイルサイズ、ファイルタイプ、完了した処理、必要な処理、またはメタデータ内に記憶することができる様々な他のビデオ処理データを含むことができるメタデータを有する特定のファイル名を有することができる。ビデオファイルのメタデータ内に提供されるものとして説明したが、必要に応じて別個のログファイルまたはビデオコンテンツファイルを提供することができる。次いで、ビデオプロセスマネージャ424は、メタデータおよび他のデジタルアセットを使用してビデオを処理することができる。例えば、GPU410を使用して、コース名、ホール番号、プレーヤ名、ショット数、およびゴルフホールの距離を含むバナーをビデオの上部に追加することができる。デジタルアセットマネージャ428は、特定のコースおよびゴルファーのデジタルアセットおよび要件にアクセスすることができる。別の態様によれば、ビデオプロセスマネージャ424は、様々な他の形態のデジタルアセット、グラフィック、テキスト、ロゴ、エフェクト、マーケティング資料、プロモーション資料、または処理されたビデオに追加することができる様々な他のデジタルアセットを管理するように構成されたデジタルアセットマネージャ428にアクセスすることができる。例えば、特定のブランド、アパレルタイプ、クラブタイプ、および/またはスイングタイプに対応するオブジェクトをビデオに追加することができる。 Once NMS 400 receives the uploaded video, video process manager 424 may begin post-processing the uploaded video stored within cloud storage and services. For example, content/file manager 422 can include the file name and destination of the video upload, and can further obtain post-processing information to process the uploaded video. For example, uploaded videos may contain information such as course name, location, hole number, user or golfer name, date and timestamp, GPS data, file size, file type, completed operations, required operations, or stored in metadata. It can have a specific file name with metadata that can include various other video processing data that can be used. Although described as being provided within the metadata of the video file, a separate log file or video content file can be provided if desired. Video process manager 424 can then process the video using the metadata and other digital assets. For example, the GPU 410 may be used to add a banner to the top of the video that includes the course name, hole number, player name, number of shots, and golf hole distance. Digital asset manager 428 can access digital assets and requirements for a particular course and golfer. According to another aspect, video process manager 424 includes various other forms of digital assets, graphics, text, logos, effects, marketing materials, promotional materials, or other materials that may be added to the processed video. A digital asset manager 428 configured to manage digital assets of the user can be accessed. For example, objects can be added to the video that correspond to particular brands, apparel types, club types, and/or swing types.
別の形態では、ショット追跡モジュール426にアクセスして使用し、アップロードされたビデオ内のゴルフショットにショットトレースを追加することができる。例えば、ビデオは、ビデオの各々からゴルフボールを識別するために、GPU410、画像プロセッサ408、およびAIロジック412を使用して処理することができる。ボールのフレーム位置をメモリ内に記憶することができ、ビデオの再生中にボールが移動している方向を示すためにトレースをオーバーレイとしてビデオに追加することができる。 In another form, shot tracking module 426 can be accessed and used to add shot traces to golf shots in uploaded videos. For example, the videos may be processed using GPU 410, image processor 408, and AI logic 412 to identify golf balls from each of the videos. The frame position of the ball can be stored in memory, and a trace can be added as an overlay to the video to indicate the direction the ball is moving while the video is playing.
別の態様によれば、センサデータマネージャ430は、ショット追跡モジュール426とともに使用されて、追加され得るRMS450から受信されたセンサデータの他のグラフィカル表現を管理することができる。例えば、ショット追跡モジュール426は、上述のようにボールを識別することができ、センサデータをさらに使用して、スイングもしくはボール速度、距離、ボール飛行、飛行経路、またはビデオプロセスマネージャ424を使用してビデオに追加され得る様々な他のセンサデータを表すグラフィックを追加することができる。RMS450のレーダユニットからのパフォーマンスデータは、RMS450からアップロードされたセンサデータを提供することができる。センサデータマネージャ430は、セッションデータにアクセスし、時間データを記録して、RMS450からアップロードされたセンサデータを決定し、それに応じてセンサデータをビデオに追加することができる。他の形態では、センサデータは、NMS400に対してリモートに記憶されてもよく、センサデータマネージャ430は、取得されたセンサデータにアクセスするために使用されてもよい。例えば、レーダユニットなどのサードパーティセンサは、RMS450でセンサデータを取得することができる。したがって、センサデータマネージャ430は、サードパーティのデータベースまたはサードパーティAPIにアクセスして、センサデータを取得することができる。他の形態では、センサデータにアクセスするためにサードパーティAPIをNMS400に追加することができる。 According to another aspect, sensor data manager 430 may be used in conjunction with shot tracking module 426 to manage other graphical representations of sensor data received from RMS 450 that may be added. For example, shot tracking module 426 may identify the ball as described above, further using sensor data to determine swing or ball speed, distance, ball flight, flight path, or using video process manager 424. Graphics can be added representing various other sensor data that can be added to the video. Performance data from the RMS 450's radar unit can provide sensor data uploaded from the RMS 450. Sensor data manager 430 can access session data, record time data, determine sensor data uploaded from RMS 450, and add sensor data to the video accordingly. In other forms, sensor data may be stored remotely to NMS 400 and sensor data manager 430 may be used to access acquired sensor data. For example, a third party sensor, such as a radar unit, can acquire sensor data at RMS 450. Accordingly, sensor data manager 430 may access third party databases or third party APIs to obtain sensor data. In other forms, third party APIs can be added to NMS 400 to access sensor data.
さらなる態様によれば、デジタルアセットマネージャ428は、ショット追跡モジュール426およびセンサデータマネージャ430を使用して検出されたショットに様々な色を追加するために使用できる。例えば、ボールが特定の速度を超えて移動する場合、赤色または「ホットな」色を適用して高速を示すことができ、または炎のグラフィックをボールに尾として追加することができる。同様に、ボール飛行が「直線」と見なされる範囲内にある場合、フックまたはスライスがないことを示すために緑色がボール飛行に適用され得る。逆に、ボールの飛行がまっすぐでない場合、黄色または赤色などの別の色をボールの飛行に適用して、理想的なショットではないことを示すことができる。一態様では、ゴルファーは、モバイルデバイスおよびモバイルアプリマネージャ436を介して、彼らが表示したいと思うインジケータのタイプを示すことができる。アップロードされたビデオを処理する他の形態もまた、本明細書の様々な追加の実施形態で説明されるように実現することができる。 According to further aspects, digital asset manager 428 can be used to add various colors to shots detected using shot tracking module 426 and sensor data manager 430. For example, if the ball moves above a certain speed, a red or "hot" color can be applied to indicate high speed, or a flame graphic can be added to the ball as a tail. Similarly, if the ball flight is within what is considered a "straight line" green color may be applied to the ball flight to indicate no hooks or slices. Conversely, if the ball's flight is not straight, another color, such as yellow or red, can be applied to the ball's flight to indicate that it is not an ideal shot. In one aspect, golfers can indicate via the mobile device and mobile app manager 436 the types of indicators they would like to see displayed. Other forms of processing uploaded videos may also be implemented as described in various additional embodiments herein.
別の態様によれば、NMS400は、パフォーマンスマネージャ438を使用して、RMS450を使用してキャプチャされたビデオ内のゴルフホール、コース、プレーヤ、または他の検出可能なオブジェクトに関連するパフォーマンス傾向を識別することができる。例えば、パフォーマンスマネージャ438は、ホールでプレイされる複数のショットを分析し、複数のプレーヤからのデータに基づいてショット傾向を決定することができる。他の形態では、AIロジック412は、ビデオを分析してグリーンのトポロジーを識別し、グリーンのホールの位置に基づいて全体的な成功率を特定することができる。グリーン分析を実行するAIロジック412はまた、グリーン上の特定の位置からパッティングされたときにボールが切れる可能性がある方向を検出することができる。AIロジック412を使用するパフォーマンスマネージャ438は、ビデオを分析することによってグリーンの特性を識別することができ、特定のゴルファーのショット傾向を決定し、ユーザプロファイルおよび統計マネージャ420内に記憶することもできる。 According to another aspect, NMS 400 uses performance manager 438 to identify performance trends related to golf holes, courses, players, or other detectable objects in videos captured using RMS 450. can be identified. For example, performance manager 438 may analyze multiple shots played on a hole and determine shot trends based on data from multiple players. In other forms, the AI logic 412 can analyze the video to identify the topology of the green and determine the overall success rate based on the location of the green's holes. The AI logic 412 that performs green analysis can also detect the direction in which the ball may cut when putted from a particular location on the green. A performance manager 438 using AI logic 412 can identify green characteristics by analyzing the video and can also determine shot trends for a particular golfer and store them within the user profile and statistics manager 420. .
さらなる態様によれば、NMS400は、プレーヤとコースとの間で分析およびプレイの提案および指示を提示するために、コースマネージャ444、パフォーマンスマネージャ438およびユーザプロファイルおよび統計マネージャ420を使用することができる。 According to further aspects, NMS 400 may use course manager 444, performance manager 438 , and user profile and statistics manager 420 to present analysis and playing suggestions and instructions between players and courses. .
別の態様では、統計を提供する方法が提供される。本方法は、ゴルフホールまたはプレーヤの少なくとも一方と関連付けられたデータを識別するステップを含む。本方法は、ゴルフホールまたはプレーヤに関連するデータを提供するステップをさらに含む。本方法は、ホールの平均スコア、ホールのレギュレーションにおけるグリーンへの到達率、ホールのピンまでの平均距離、またはホールの平均ドライブ距離を提示するステップを含むことができる。本方法は、プレーヤのスコアを提示するステップと、プレーヤのレギュレーションにおけるグリーンの割合、プレーヤの平均ドライブ距離、またはプレーヤのピンまでの平均距離を提示するステップとを含むことができる。データは、単一のラウンド、単一の日、複数のラウンド、複数の日、単一のプレーヤ、および/または複数のプレーヤに関連付けられ得る。本方法は、単一のホールまたはプレイされたすべてのホールにわたってプレーヤの統計を作成するステップを含むことができる。本方法は、ビデオまたはホールの表現においてピンドロップグラフィックを提供するステップを含むことができる。ピンドロップは、ホール上の単一のプレーヤのショットまたは複数のプレーヤに対応することができる。ピンドロップは、ピンドロップによって識別されたショットに関連付けられたビデオへのリンクを含むことができる。 In another aspect, a method of providing statistics is provided. The method includes identifying data associated with at least one of a golf hole or a player. The method further includes providing data related to the golf hole or player. The method may include presenting an average score for a hole, a green in regulation percentage for a hole, an average distance to a pin for a hole, or an average drive distance for a hole. The method may include presenting the player's score, presenting the player's green percentage in regulation, the player's average drive distance, or the player's average distance to the pin. Data may be associated with a single round, a single day, multiple rounds, multiple days, a single player, and/or multiple players. The method may include creating player statistics over a single hole or all holes played. The method may include providing pin drop graphics in the video or hole representation. A pin drop can correspond to a single player's shot or multiple players on the hole. The pin drop may include a link to the video associated with the shot identified by the pin drop.
さらなる態様によれば、コースマネージャ444は、ビデオプロセスマネージャ424を使用することができるコース情報を維持および更新するために使用することができる。例えば、コースマネージャ444は、特定のゴルフコースおよびホールで作成されたビデオに追加される、デジタルアセットマネージャ428によって管理され得るデジタルアセットを提供する。例えば、ロゴ情報、コースリンク、ホールデータ、および位置は、コースマネージャ444を使用して提供することができる。コースマネージャ444はまた、特定のコースに位置し、そこで働くゴルフプロのプロファイルを維持するために使用することができる。特定のコースに対する1人または複数人のゴルフプロのプロフィール記述または略歴は、コースマネージャ444によって維持することができ、モバイルアプリマネージャ436を使用して一人以上のユーザインタフェースに追加することができる。プロファイルの各々は、コースマネージャ444を使用してオン/オフに切り替えることができ、経歴情報がモバイルアプリ内に存在することを可能にする。このようにして、特定のコースに関連付けられたモバイルアプリを使用して、地元のゴルフプロに連絡することができる。 According to further aspects, course manager 444 can be used to maintain and update course information, which can use video process manager 424. For example, course manager 444 provides digital assets that can be managed by digital asset manager 428 that are added to videos created on particular golf courses and holes. For example, logo information, course links, hole data, and location may be provided using course manager 444. Course manager 444 may also be used to maintain profiles of golf professionals located and working at a particular course. A profile description or biography of one or more golf professionals for a particular course may be maintained by course manager 444 and added to one or more user interfaces using mobile app manager 436. Each of the profiles can be turned on and off using course manager 444, allowing biographical information to be present within the mobile app. In this way, a mobile app associated with a particular course can be used to contact local golf professionals.
更新マネージャ442は、更新および修正された情報がシステム全体にわたって最新のままであるように、上記のマネージャまたはモジュールのうちの1つまたは複数で行われた更新を上記の他のマネージャのうちの1つまたは複数にプッシュするために使用され得る。 Update manager 442 updates updates made in one or more of the managers or modules described above to one of the other managers described above so that updated and modified information remains current throughout the system. Can be used to push to one or more.
次に図5A~図5Dを参照すると、メディア対応モバイルアプリケーションのグラフィカルユーザインタフェースが開示されている。モバイルアプリケーションのユーザインタフェースは、図5A~図5Dに一般的に示されており、携帯電話、タブレット、スマートウォッチ、ゴルフカート、プルカート、プッシュカート、動力「追従」カート、ラップトップコンピュータ、または任意の他のモバイルデバイス上で全体的または部分的に使用することができるアプリケーション内に提供することができる。ユーザインタフェース5A~5Dを有するモバイルアプリケーションはまた、従来のコンピュータ、インターネットブラウザなどの他のデバイス上にインストール/具現化/アクセス可能であってもよいことが理解されよう。 5A-5D, a graphical user interface for a media-enabled mobile application is disclosed. The mobile application user interface is shown generally in FIGS. 5A-5D and can be used on a mobile phone, tablet, smart watch, golf cart, pull cart, push cart, powered "follow" cart, laptop computer, or any Can be provided within an application that can be used in whole or in part on other mobile devices. It will be appreciated that mobile applications with user interfaces 5A-5D may also be installed/implemented/accessible on other devices such as conventional computers, internet browsers, etc.
ここで図5Aを参照すると、アプリケーションホーム画面が全体的に500で示されており、現在の気象条件504を有するホーム画面インタフェース502と、ビデオホーム背景画面506とを含む。ビデオホーム背景画面506は、以前に録画されたビデオからの静止画像を含むことができ、またはいくつかの形態では、以前に録画されたユーザのゴルフショットのアニメーションビデオを含むことができる。ホーム画面インタフェース502はまた、新しいメッセージをアプリユーザに通信するように構成されたメッセージングバナー512を含む。例えば、現在のコース条件を提供することができ、ゴルフコースからのメッセージを提供することができ、コースにおける広告もしくは特別番組、他のゴルファーもしくは友人からのメッセージ、または様々な他のアイテムもしくはニュースアイテムをメッセージボード512内に表示することができる。ホーム画面インタフェース502はまた、ホーム画面アイコン514、コースアイコン516、チェックインまたはスキャンアイコン518、バブルセクションを有するマイショットアイコン520、およびユーザプロファイル情報を含むアカウントアイコン522を含むナビゲーション要素を含む。ホーム画面アイコン514は、選択されると、ホーム画面インタフェース502を表示する。 Referring now to FIG. 5A, an application home screen is shown generally at 500 and includes a home screen interface 502 with current weather conditions 504 and a video home background screen 506. Video home background screen 506 may include still images from previously recorded videos, or in some forms may include previously recorded animated videos of the user's golf shots. Home screen interface 502 also includes a messaging banner 512 configured to communicate new messages to app users. For example, it can provide current course conditions, it can provide messages from the golf course, it can provide advertisements or specials on the course, messages from other golfers or friends, or various other items or news items. can be displayed within message board 512. The home screen interface 502 also includes navigational elements including a home screen icon 514, a course icon 516, a check-in or scan icon 518, a My Shots icon 520 with a bubble section, and an account icon 522 containing user profile information. Home screen icon 514 displays home screen interface 502 when selected.
一態様によれば、ユーザがコースアイコン516を選択すると、位置画面インタフェース524が表示され、地図ビューおよびリストビューセレクタ526を含む。地図ビューを選択すると、ビデオ録画技術を有するコース532の地図530が地図上にカメラアイコンとして表示される。リストビューが選択された場合、コースのリスト(明示的には図示せず)を提供することができる。ユーザがコース532を選択すると、場所、距離および方向536、ホールのホール番号、パーおよび距離を有するゴルフホール記述538、ユーザがコースのウェブサイト上でティータイムにアクセスして予約することを可能にする1つまたは複数のコースリンク540などのコース詳細を示すコース記述画面534が表示される。低空飛行ビデオまたはホールビューセクション542は、ビデオ録画技術を有するゴルフホールのグラフィックまたはビデオ記述を提供する。 According to one aspect, when the user selects the course icon 516, a location screen interface 524 is displayed and includes a map view and a list view selector 526. When the map view is selected, a map 530 of a course 532 with video recording technology is displayed as a camera icon on the map. If the list view is selected, a list of courses (not explicitly shown) may be provided. Once a user selects a course 532, a golf hole description 538 with location, distance and direction 536, hole number, par and distance of the hole allows the user to access and reserve tee times on the course website. A course description screen 534 is displayed showing course details, such as one or more course links 540 to be viewed. A low-flying video or hole view section 542 provides a graphic or video description of a golf hole with video recording technology.
さらなる態様によれば、モバイルアプリは、コースリンク540とともに使用されて、位置画面インタフェース524内でティータイムをスケジュールすることができる(明示的には示されていない)。コースリンク540は、プロセス支払いセクションを含むことができ、需要に基づいて適応型価格設定を使用するように構成することができる。例えば、需要が低い場合、ティータイムスケジュールインタフェースを有するコースリンク540は、ゴルフコースでラウンドを行うための割引価格設定を自動的に奨励することができる。 According to a further aspect, the mobile app can be used in conjunction with the course link 540 to schedule tee times within the location screen interface 524 (not explicitly shown). Course link 540 can include a process payment section and can be configured to use adaptive pricing based on demand. For example, when demand is low, the course link 540 with tee time schedule interface can automatically encourage discount pricing for playing rounds at the golf course.
さらなる態様によれば、ゴルファーがビデオ録画技術を有するコースをプレイしており、彼らがホールに到着すると、ゴルファーは、図5Bに示されるチェックインユーザインタフェース544にアクセスするためにチェックインまたはスキャンアイコン518を選択することができる。第1のチェックインユーザインタフェース546は、QRコード(登録商標)画像548と、スキャンナウアイコン550と、QRコード(登録商標)が特定のゴルフホールのどこに位置するかを記述する質問リンク552とを含むことができる。ユーザがスキャンナウアイコン550を選択すると、ゴルファーが自分のショットを撮る時間であり、第2のチェックインユーザインタフェース554が、ゴルファーのビデオ録画時のカウントダウン556を表示する。録画が開始されると、ティーオフメッセージ560を示す第3のチェックインインタフェース558と、カメラが録画中であることを示す赤いドットが点滅しているアニメーション録画アイコン562とが表示される。プレーヤがショットを完了すると、プレーヤは録画停止アイコン564を選択して録画をオフにすることができる。各ゴルファーは、このシーケンスを繰り返して、自律型ビデオ技術に自分のショットを録画させることができる。 According to a further aspect, when a golfer is playing a course that has video recording technology and they arrive at a hole, the golfer clicks the check-in or scan icon to access the check-in user interface 544 shown in FIG. 5B. 518 can be selected. The first check-in user interface 546 includes a QR code image 548, a scan now icon 550, and a question link 552 that describes where the QR code is located on a particular golf hole. can include. When the user selects the scan now icon 550, it is time for the golfer to take his shot, and the second check-in user interface 554 displays a countdown 556 of the golfer's video recording time. When recording begins, a third check-in interface 558 is displayed showing a tee-off message 560 and an animated recording icon 562 with a flashing red dot indicating that the camera is recording. Once the player completes the shot, the player can select the stop recording icon 564 to turn off recording. Each golfer can repeat this sequence and have the autonomous video technology record their shots.
一態様によれば、ユーザがゴルフホールに到着したときにQRコード(登録商標)が利用できない場合があり、または別の形態のチェックインが展開される場合がある。したがって、チェックインユーザインタフェース546は、ビデオ開始アイコン(明示的には図示せず)を含むように更新することができる。例えば、モバイルアプリは、ユーザがティーボックスに到着したときを検出するために位置サービスとともに使用することができ、チェックインまたはスキャンアイコン518を選択することができ、ビデオ開始アイコンをチェックインユーザインタフェース546内に表示することができる。したがって、様々な他のチェックイン方法を使用することができ、QRコード(登録商標)を使用してチェックインし、ユーザのショットの録画を開始するだけに限定されない。 According to one aspect, a QR code may not be available when the user arrives at the golf hole, or another form of check-in may be deployed. Accordingly, check-in user interface 546 may be updated to include a start video icon (not explicitly shown). For example, a mobile app can be used with location services to detect when a user arrives at a tee box, can select a check-in or scan icon 518, and can select a video start icon to check-in user interface 546. can be displayed within. Therefore, various other check-in methods can be used and are not limited to just checking in using a QR code and starting recording the user's shots.
ここで図5Cを参照すると、ユーザインタフェース568は、利用可能なビデオの通知のグラフィカル表現を含む。ユーザインタフェース568は、スクリーン566を有するモバイルデバイスのユーザに送信されるメッセージ570を示す。モバイルデバイスは、ユーザまたはゴルファーのモバイルデバイスとすることができ、スクリーン566は、通知、メッセージ、アプリ内メッセージ、またはテキストメッセージなどがモバイルデバイスのスクリーン上に表示されることを可能にするように構成されたモバイルデバイススクリーンの任意の部分とすることができる。このようにして、録画されたビデオの処理が終了し、メディアが利用可能になると、ユーザは、ビデオが利用可能であるというメッセージを受信することができる。 Referring now to FIG. 5C, user interface 568 includes a graphical representation of notifications of available videos. User interface 568 shows a message 570 sent to a user of a mobile device having screen 566 . The mobile device can be a user's or golfer's mobile device, and the screen 566 is configured to allow notifications, messages, in-app messages, text messages, etc. to be displayed on the screen of the mobile device. It can be any part of a configured mobile device screen. In this way, once the recorded video has finished processing and the media is available, the user can receive a message that the video is available.
別の態様によれば、ユーザは、新たな以前に作成されたビデオを見るためにマイショットアイコン520を選択することができる。例えば、マイショットユーザインタフェース572は、マイショットユーザインタフェース572内のビデオを検索するためのアクティビティタブ574、グループタブ576、および検索ビデオセクション578を含むことができる。「NEW」ラベル580は、ビデオが新規かどうかを示すために新規ビデオ582の上に重ねられる。新規ビデオ582とともに、コース名、ホール記述、およびショットが行われ、ビデオが録画された日付を含むことができるショット記述584がある。さらなる態様によれば、以下に説明するように、マイショットユーザインタフェース572は、新規ビデオ582を共有するための共有アイコン588と、新規ビデオ582を地元プロと共有するためのReelTipアイコン586とをさらに含む。共有アイコン588を選択すると、共有ユーザインタフェース594が画面590のユーザインタフェース592内に表示される。共有ユーザインタフェース594は、ユーザがフェイスブック、インスタグラム、ツイッター、および様々な他のソーシャルメディア宛先などのソーシャルメディア宛先に共有することを可能にするためにソーシャルメディアタブ596への共有を含むことができる。共有ユーザインタフェース594はまた、メディアビューアを起動するための「マイビデオを見る」タブ598、ユーザがテキスト、電子メール、またはビデオリンクを共有することができる他のメッセージングを介して固有のビデオリンクをコピーおよび送信することを可能にするための「ビデオへのコピーリンク」タブ501を含む。ユーザは、ビデオ削除タブ503を使用してビデオを削除することもできる。 According to another aspect, the user may select the My Shots icon 520 to view a new previously created video. For example, My Shots user interface 572 may include an Activities tab 574, a Groups tab 576, and a Search Videos section 578 for searching for videos within My Shots user interface 572. A "NEW" label 580 is superimposed over new video 582 to indicate whether the video is new. Along with the new video 582 is a shot description 584 that can include the course name, hole description, and date the shot was made and the video was recorded. According to further aspects, My Shots user interface 572 further includes a share icon 588 for sharing new video 582 and a ReelTip icon 586 for sharing new video 582 with local professionals, as described below. include. Upon selection of share icon 588, a share user interface 594 is displayed within user interface 592 of screen 590. Sharing user interface 594 may include a share to social media tab 596 to allow users to share to social media destinations such as Facebook, Instagram, Twitter, and various other social media destinations. can. The sharing user interface 594 also includes a "Watch My Videos" tab 598 to launch a media viewer, a unique video link via text, email, or other messaging that allows users to share video links. Includes a "Copy Link to Video" tab 501 to enable copying and sending. The user can also delete videos using the video deletion tab 503.
さらなる態様によれば、マイショットユーザインタフェース572はまた、マイショットユーザインタフェース572内で選択することができるグループタブ576を含む。グループタブ576は、選択されると、ユーザがビデオが録画されたホール(明示的には図示せず)を再生したときにユーザが再生したグループの各々を表示する。例えば、ユーザが他の3人のゴルファーとプレイしていた場合、ゴルファーの名前および彼らのショットへのリンクのそれぞれをマイショットユーザインタフェース572内に表示することができる。さらに、グループ内の各ユーザは、グループタブセクション内にコメントを残すこともでき、その日一緒にプレイしたプレーヤのみが閲覧および編集できるプライベート「メッセージボード」をさらに作成することができる。以下に説明するさらなる実施形態では、各ユーザは、グループセクションから自動的に追加または削除され得る。例えば、ユーザがチェックインまたはスキャンアイコン518を使用してショットを撮るためにチェックインすると、モバイルアプリは、各ユーザプロファイルをグループタブ576のグループセクションに自動的に追加することができ、それにより、その日一緒にゴルフをプレイしたゴルファーのグループと連絡先情報、投稿、コメント、および他のコンテンツを共有する効率的な方法を作成することができる。 According to further aspects, My Shots user interface 572 also includes a group tab 576 that can be selected within My Shots user interface 572. Group tab 576, when selected, displays each of the groups that the user played when the user played the hole (not explicitly shown) in which the video was recorded. For example, if the user was playing with three other golfers, each of the golfers' names and links to their shots may be displayed within the My Shots user interface 572. Additionally, each user in the group can also leave comments within the group tab section, further creating a private "message board" that can only be viewed and edited by the players they played with that day. In further embodiments described below, each user may be automatically added or removed from the groups section. For example, when a user checks in to take a shot using the check in or scan icon 518, the mobile app can automatically add each user profile to the groups section of the groups tab 576, thereby You can create an efficient way to share contact information, posts, comments, and other content with a group of golfers who played golf together that day.
さらなる態様によれば、グループタブ576は、プライベートグループ(明示的には図示せず)内のゴルファーと通信するために使用され得る。例えば、特定のゴルファーのグループの各メンバは、モバイルアプリをダウンロードしており、各ゴルファーは録画している可能性がある。各ゴルファーのショットは集約され、プライベートグループ内のゴルファーにプライベートに示され、それによって各ゴルファーが見てコメントするための一連のショットを提供することができる。このようにして、単一のグループ外のグループを作成し、プライベートグループセクション内に表示することができ、それにより、その日にそのコースをプレイするプレイヤの任意のサイズのグループのためのプライベートメッセージボードおよびソーシャルメディアプラットフォームを作成することができる。 According to a further aspect, group tab 576 may be used to communicate with golfers in a private group (not explicitly shown). For example, each member of a particular group of golfers may have downloaded a mobile app, and each golfer may be recording. Each golfer's shots can be aggregated and privately shown to golfers in a private group, thereby providing a series of shots for each golfer to view and comment on. In this way, groups outside of a single group can be created and displayed within the private groups section, thereby providing a private message board for any size group of players playing that course on that day. and social media platforms.
さらなる態様によれば、ユーザが地元プロとビデオを共有するためにReelTipアイコン586を選択すると、Reel Tipユーザインタフェース507をユーザに表示することができる。Reel Tipユーザインタフェース507は、ビデオが撮影されたローカルゴルフコースロゴ509と、そのコースの地元プロからビデオ上で助言を取得する方法の説明511とを含むことができる。Reel Tipユーザインタフェースはまた、第1のプロ情報タブ513、第2のプロ情報タブ515、および第3のプロ情報タブ517を含むことができる。プロ情報タブは、助言を提供するためにその日にプロが空いているかに基づいて追加または削除することができる。また、各プロ情報タブは、写真セクション、名前およびタイトルセクション、ならびに小さな略歴ラインを含むことができる。ユーザがプロ情報タブを選択すると、選択されたプロに対するプロ情報ユーザインタフェース519が表示される。例えば、第2のプロ情報タブ515が選択されると、プロ情報ユーザインタフェース519は、プロに関する簡単な略歴、プロの画像523、および選択されたプロとビデオを共有するための共有アイコン525を含むことができるプロの名前および略歴セクション521を表示する。共有アイコン525を選択すると、共有セレクタ(明示的には示されていない)を表示することができ、ユーザは、選択されたプロのビデオへのリンクをテキスト、電子メール、アプリメッセージなどで入力することができる。このようにして、プレーヤと地元プロとの間のダイアログを作成することができ、それにより、プレーヤとプロとの間に存在し得る通信の障壁を減少させ、それにより、モバイルアプリがゴルフのゲームの成長を支援することを可能にする。 According to a further aspect, a Reel Tip user interface 507 may be displayed to the user when the user selects the ReelTip icon 586 to share a video with a local professional. Reel Tip user interface 507 may include a local golf course logo 509 where the video was shot and an explanation 511 of how to obtain tips on video from a local professional at that course. The Reel Tip user interface may also include a first pro information tab 513, a second pro information tab 515, and a third pro information tab 517. Pro information tabs can be added or removed based on the availability of pros that day to provide advice. Also, each pro information tab can include a photo section, a name and title section, and a small bio line. When the user selects the pro information tab, a pro information user interface 519 for the selected pro is displayed. For example, when the second pro information tab 515 is selected, the pro information user interface 519 includes a brief bio about the pro, an image of the pro 523, and a share icon 525 for sharing the video with the selected pro. Displays the professional's name and biography section 521. Selecting the share icon 525 may display a share selector (not explicitly shown), allowing the user to enter a link to the selected professional video via text, email, app message, etc. be able to. In this way, a dialogue between the player and the local pro can be created, thereby reducing the communication barriers that may exist between the player and the pro, thereby making the mobile app more accessible to golf players. to support the growth of
次に図6を参照すると、AI対応ゴルフコースの図が示されている。一般に600で示されるAIゴルフ(AIG)コースは、マルチホールゴルフコースとして示されており、任意の数のゴルフホール、ホールタイプ、および施設を含むことができる。例えば、AIGコース600は、18ホールのコース、9ホールのコース、3ホールのコース、パッティングコース、または必要に応じて任意のサイズのコースとすることができる。さらに、AI対応ゴルフコースは、従来のゴルフコースである必要はなく、練習または娯楽に使用することができるゴルフ施設として提供することができる。例えば、AI対応ゴルフコースは、複数のティーボックス位置を有するゴルフ練習場または練習施設として実現することができ、同時にゴルフボールを打つゴルファーは、ショットごとにビデオをキャプチャしてゴルファーに提供することができる。他の形態では、AI対応ゴルフコースは、TopGolfなどの屋外施設またはRokgolfなどの屋内施設などのAI対応ゴルフ娯楽施設として実現することができる。AI対応カメラを提供して各ベイを録画することができ、各プレーヤのビデオを録画し、本明細書で説明するようにすべてのショットに対して処理することができる。したがって、ゴルファーが施設を離れると、彼らの体験のビデオが自動的に作成され、必要または所望に応じてプレーヤまたは参加者のモバイルアプリまたは他の宛先および/またはソーシャルメディアアウトレットに通信され得る。 Referring now to FIG. 6, a diagram of an AI-enabled golf course is shown. AI golf (AIG) courses, generally designated 600, are designated as multi-hole golf courses and may include any number of golf holes, hole types, and facilities. For example, AIG course 600 can be an 18-hole course, a 9-hole course, a 3-hole course, a putting course, or any size course as desired. Additionally, an AI-enabled golf course need not be a traditional golf course, but can be provided as a golf facility that can be used for practice or entertainment. For example, an AI-enabled golf course can be implemented as a driving range or practice facility with multiple tee box locations, and a golfer hitting a golf ball at the same time can capture and provide video of each shot to the golfer. can. In other forms, an AI-enabled golf course may be implemented as an AI-enabled golf entertainment facility, such as an outdoor facility such as TopGolf or an indoor facility such as Rokgolf. AI-enabled cameras can be provided to record each bay, and video for each player can be recorded and processed for every shot as described herein. Thus, when a golfer leaves the facility, a video of their experience can be automatically created and communicated to the player's or participant's mobile app or other destination and/or social media outlet as needed or desired.
一態様によれば、AIGコース600はまた、様々な方法で使用することができる多数のレーダユニットを含む。本明細書に記載のレーダユニットは、前方方向に広がり、反射パルスが受信機に戻り、レーダユニットによって検出され得る高周波(10GHz)無線パルスを有する使用可能な単一または複数の送信機を有することができる。ユニットは、ゴルフボールまたは受信素子の垂直および水平アレイを使用してダウンレンジにある他の物体から反射して戻ってくるパルスを検出することができるアレイ技術を受信側にさらに有することができる。受信パルスが各受信要素に当たるタイミングは、その要素とゴルフボールとの間の角度に応じて決まる。タイミング差を使用して、ボールとレーダユニットとの間の水平角および垂直角を決定することができる。レーダユニットはまた、ピン、旗、グリーンの縁、ホール、バンカーの木、ハザードなどを含む反射パルスを生成することができるダウンレンジオブジェクトを測定するために使用することができる。移動オブジェクトからの受信パルスは、オブジェクトの速度または全体サイズに比例する量だけ周波数シフトされる。例えば、レーダユニットを用いて、ピンまでの距離を測定することができる。ゴルフボールの反射パルスはピンとは異なり、動いているボールが停止すると、ユニットはピン位置に対するボールの位置を検出することができる(各ピンは毎日新しい位置に移動する)。 According to one aspect, AIG course 600 also includes a number of radar units that can be used in a variety of ways. The radar units described herein have single or multiple transmitters available that have high frequency (10 GHz) radio pulses that extend in a forward direction and whose reflected pulses can be returned to the receiver and detected by the radar unit. Can be done. The unit can further have array technology on the receiving side that can detect pulses reflecting back from a golf ball or other objects downrange using vertical and horizontal arrays of receiving elements. The timing at which the received pulse hits each receiving element is determined by the angle between that element and the golf ball. The timing difference can be used to determine the horizontal and vertical angles between the ball and the radar unit. Radar units can also be used to measure downrange objects that can generate reflected pulses, including pins, flags, green edges, holes, bunker trees, hazards, etc. Received pulses from a moving object are frequency shifted by an amount proportional to the object's velocity or overall size. For example, a radar unit can be used to measure the distance to the pin. The golf ball's reflected pulse is different from the pin, and when the moving ball stops, the unit can detect the ball's position relative to the pin position (each pin moves to a new position every day).
一態様によれば、レーダユニットは、その前方に、ゴルフボールを「見る」ことができる円錐形領域を含むことができる。この領域は、複数のレーダユニットを用いてゴルフ場全体をカバーすることができる。さらなる態様によれば、レーダユニットを使用して、動いているゴルフボールがグリーンに到着して停止するまで検出することができる。例えば、レーダユニットはまた、以前にボールが存在せず、現在はグリーン上にボールが存在することを識別することができる。レーダユニットは、レーダユニットとゴルフボールとの間の角度を測定することができ、移動後に午前中に現れたが、1日中移動しなかったピンに対するゴルフボールまでの距離も測定することができる。 According to one aspect, the radar unit can include a conical region in front of it that can "see" the golf ball. This area can cover the entire golf course using multiple radar units. According to a further aspect, a radar unit can be used to detect a moving golf ball until it reaches the green and comes to rest. For example, the radar unit may also identify that there was no ball previously and there is now a ball on the green. The radar unit can measure the angle between the radar unit and the golf ball, and can also measure the distance to the golf ball relative to the pin that appeared in the morning after moving but did not move all day. .
レーダユニットをAI対応ビデオとペアリングすると、AIGコース600は、レーダ入力、ビデオ入力、およびAIの両方を使用してゴルフコースでのプレイの様々な態様を検出し、そうでなければ出力されなかったゴルファーに固有のビデオ映像を出力することができる自律型ビデオ処理を可能にする。例えば、レーダは、1人の特定のゴルファーを次から決定することができない、または特定のゴルファーのためにスタックされたゴルフボールをビデオの特定の部分とペアリングすることができないという制限を有する。ビデオ処理、AI、およびレーダを使用して特定のゴルファーおよびそのプレイを検出するインテリジェントシステムを使用することにより、レーダユニットは、AI対応ゴルフコースシステム内で結合され、ゴルファーに固有の体験を作り出すことができる。 When you pair a radar unit with AI-enabled video, the AIG Course 600 uses both the radar input, video input, and AI to detect various aspects of golf course play that would otherwise not be output. enables autonomous video processing that can output video footage specific to golfers. For example, radar has limitations in that it cannot determine one particular golfer from the next or pair stacked golf balls for a particular golfer with a particular portion of the video. By using an intelligent system that uses video processing, AI, and radar to detect specific golfers and their play, radar units can be combined within an AI-enabled golf course system to create a unique experience for golfers. Can be done.
一態様によれば、AIGコース600は、第1のホール601と、第2のホール602と、第3のホール603と、第4のホール604と、第5のホール605とを含む。AIGコース600はまた、ウォーターハザード606、クリークハザード607、およびクラブハウス608を含む。第1のホール601は、第1のホールのティーボックス609と、第1のホールのグリーン610と、第1のホールのフェアウェイ611とを含む。第1のホール601は、パー4として実現され、第1のホールのティーボックスカメラ612、第1のホールのフェアウェイカメラ613、および第1のホールのグリーンカメラ614を含む。第1のホール601はまた、第1のホールのティーボックス609およびフェアウェイ611をカバーする第1のホールのレーダ615を含む。第1のホール601はまた、第1のホールのカメラおよび第1のホールのレーダの各々に結合された第1のリモートメディアシステム(RMS)616を含む。RMS616、および図6に提供される様々な他のRMSは、図1のRMS100、図2のRMS200、図7のRMS710、図11のRMS1124、またはAIGコース600上で実現することができる様々な他のRMSとして提供することができる。 According to one aspect, AIG course 600 includes a first hole 601 , a second hole 602 , a third hole 603 , a fourth hole 604 , and a fifth hole 605 . AIG course 600 also includes water hazards 606, creek hazards 607, and clubhouse 608. The first hole 601 includes a first hole tee box 609, a first hole green 610, and a first hole fairway 611. The first hole 601 is realized as a par 4 and includes a first hole tee box camera 612, a first hole fairway camera 613, and a first hole green camera 614. First hole 601 also includes a first hole radar 615 covering first hole tee box 609 and fairway 611 . First hall 601 also includes a first remote media system (RMS) 616 coupled to each of the first hall camera and first hall radar. RMS 616, and various other RMSs provided in FIG. 6, may be implemented on RMS 100 of FIG. 1, RMS 200 of FIG. 2, RMS 710 of FIG. 7, RMS 1124 of FIG. It can be provided as RMS.
さらなる態様によれば、AIGコース600はまた、第2のホールの後部ティーボックス617、第2のホールの中間ティーボックス618、第2のホールの前部ティーボックス619、および第2のホールのグリーン620を含む第2のホール602を含む。第2のホール602は、パー3のゴルフホールであるように構成され、いずれかのティーボックス内のゴルファーおよび第2のホールのグリーン620へのそのショットを録画するために後部ティーボックス617および前部ティーボックス619と位置合わせされた第2のホールの第1のカメラ621を含む。第2のホール602はまた、中間ティーボックス618を使用してゴルファーを録画するために、中間ティーボックス618およびグリーン620と位置合わせされた第2のホールの第2のカメラ622を含む。各ティーおよびグリーンの組合せの高度または高さに応じて、各カメラを異なる高さに設けることができることを理解されたい。第2のホール602はまた、グリーン620上の様々な角度からゴルファーを録画するように構成された第1のグリーンサイドカメラ623、第2のグリーンサイドカメラ624、および第3のグリーンサイドカメラ625を含む。 According to further aspects, the AIG course 600 also includes a second hole rear tee box 617, a second hole intermediate tee box 618, a second hole front tee box 619, and a second hole green. A second hole 602 including 620 is included. The second hole 602 is configured to be a par 3 golf hole, with a rear tee box 617 and a front tee box 617 to record the golfer in either tee box and his shot to the green 620 of the second hole. The first camera 621 of the second hole is aligned with the third tee box 619 . The second hole 602 also includes a second hole second camera 622 aligned with the intermediate tee box 618 and green 620 to record the golfer using the intermediate tee box 618. It should be appreciated that each camera can be placed at a different height depending on the elevation or height of each tee and green combination. The second hole 602 also has a first greenside camera 623, a second greenside camera 624, and a third greenside camera 625 configured to record the golfer from various angles on the green 620. include.
さらなる態様によれば、AIGコース600はまた、第3のホールのティーボックス626、第3のホールのグリーン628、および第3のホールのフェアウェイ627を含む第3のホール603を含む。第3のホール603は、パー4のゴルフホールとなるように構成されている。第3のホール603は、第1のグリーンサイドカメラ623を第3のホールのティーボックス626のためのティーボックスカメラとして使用するように構成されている。この例では、ユーザが第3のティーボックス626上にいるとき、第2のグリーン620上のアクションを録画するために第2および第3のグリーンサイドカメラを残して、第1のグリーンサイドカメラ623は、第3のティーボックス626上のプレーヤに向けて回転させ、旋回させ、焦点を合わせることができる。このようにして、AIGコース600は、AIGコース600上でプレイを録画するために必要とされ、または要求されるカメラの数のコスト削減を実現することができる。第3のホール603はまた、第1のグリーンサイドカメラ631と、第2のグリーンサイドカメラ632と、第3のグリーンサイドカメラ630と、フェアウェイカメラ629とを含む。第2のグリーンサイドカメラ632は、後述するように、第3のグリーン628および第4のホール604の映像を録画する位置にある。 According to further aspects, the AIG course 600 also includes a third hole 603 that includes a third hole tee box 626, a third hole green 628, and a third hole fairway 627. The third hole 603 is configured to be a par 4 golf hole. The third hole 603 is configured to use the first greenside camera 623 as a tee box camera for the third hole tee box 626. In this example, when the user is on the third tee box 626, the first greenside camera 623 leaves the second and third greenside cameras to record the action on the second green 620. can be rotated, pivoted, and focused toward the player on the third tee box 626. In this manner, the AIG course 600 may realize cost reductions in the number of cameras needed or required to record play on the AIG course 600. The third hole 603 also includes a first greenside camera 631, a second greenside camera 632, a third greenside camera 630, and a fairway camera 629. The second greenside camera 632 is in a position to record images of the third green 628 and the fourth hole 604, as will be described later.
ここで第4のホール604を参照すると、第2のグリーンサイドカメラ632は、第4のホール604上のビデオを録画するために第4のホールのティーボックス633および第4のグリーン634と位置合わせされ得る。第4のホール604はまた、第4のホール604のグリーン634上のアクションを録画するための第4のグリーンカメラ635を含み、パー3として設けられる。RMS647は、第3のグリーン628と第4のホールのティーボックス633との間に配置され、各位置で録画されたビデオを処理するために使用することができる。さらに、第4のグリーンカメラ635は、第4のホール604上の録画されたビデオを処理および通信するためにRMS647に結合することができる。 Referring now to the fourth hole 604, a second greenside camera 632 is aligned with the fourth hole tee box 633 and fourth green 634 to record video on the fourth hole 604. can be done. The fourth hole 604 also includes a fourth green camera 635 to record the action on the green 634 of the fourth hole 604 and is provided as a par three. The RMS 647 is located between the third green 628 and the fourth hole tee box 633 and can be used to process video recorded at each location. Additionally, a fourth green camera 635 may be coupled to the RMS 647 to process and communicate recorded video on the fourth hall 604.
さらなる態様によれば、AIGコース600は、パー5としての第5のホール605を含み、第5のホールのティーボックス636と、第1のフェアウェイ着地エリア637と、第2のフェアウェイ着地エリア638と、第5のホールのグリーン639とを含む。第5のホール605は、第5のホール605の右側のウォーターハザード606と、第1のフェアウェイ着地エリア637と第2のフェアウェイ着地エリア638との間に位置するクリーク607とをさらに含む。第5のホール605は、第5のホールのティーボックスカメラ640と、第1のフェアウェイカメラ642と、第2のフェアウェイカメラ643と、第5のグリーンカメラ644とを含む。第5のホール605はまた、ティーボックスビデオ、レーダデータ、および第1のフェアウェイビデオを含む第5のホール605の第1の部分を処理するための第5のホールのレーダ641および第1のフェアウェイRMS648を含む。第5のホール605はまた、第5のホール605のプレイ中にキャプチャされた第2のフェアウェイビデオおよび第5のグリーンビデオを処理するように構成された第2のRMS649を含む。 According to further aspects, the AIG course 600 includes a fifth hole 605 as a par 5, with a fifth hole tee box 636, a first fairway landing area 637, and a second fairway landing area 638. , and the green 639 of the fifth hole. The fifth hole 605 further includes a water hazard 606 on the right side of the fifth hole 605 and a creek 607 located between the first fairway landing area 637 and the second fairway landing area 638. The fifth hole 605 includes a fifth hole tee box camera 640, a first fairway camera 642, a second fairway camera 643, and a fifth green camera 644. The fifth hole 605 also includes a fifth hole radar 641 and a first fairway for processing a first portion of the fifth hole 605 including tee box video, radar data, and a first fairway video. Includes RMS648. The fifth hole 605 also includes a second RMS 649 configured to process a second fairway video and a fifth green video captured during play of the fifth hole 605.
さらなる態様によれば、AIGコース600は、AIGコース600においてカメラ、レーダ、RMSおよび様々な他の受電デバイスに電力を供給することができる電力ネットワーク645を含む。電力ネットワーク645は単一の場所に限定されず、ホールごとに、またはAIGコース600の他の場所に分散され得ることを理解されたい。必要に応じて、異なる電力レベルを提供し、アクセスすることもできる。 According to further aspects, AIG course 600 includes a power network 645 that can power cameras, radar, RMS, and various other powered devices in AIG course 600. It should be appreciated that power network 645 is not limited to a single location and may be distributed by hole or other locations on AIG course 600. Different power levels can also be provided and accessed as needed.
AIGコース600はまた、ドライビングティー位置651、ゴルフ練習場カメラ652、1つまたは複数の練習場レーダ653、および練習場RMS654を含むゴルフ練習場施設650を含むことができる。ゴルフ練習場施設650の全体的なサイズに応じて、追加のカメラ、レーダ、およびRMSを設けることができる。ある態様によれば、ゴルフ練習場設備は、ティー位置651のためのグラスティーおよび練習場内のピン位置を有する従来のゴルフ練習場であり得る。別の形態では、ティー位置651は、TopGolf体験と同様の娯楽に使用することができるドライビングベイ位置とすることができる。例えば、ユーザは、ティー位置651内のベイを一定期間予約することができ、ゴルフ練習場内の目標に向けてゴルフボールを打つ練習をすることができる。他の形態では、各ベイは、ショットの動画メディアを示すための1つまたは複数の画面(明示的には図示せず)を含むことができる。特定の実施形態では、各ベイは、ゴルフ練習場カメラ652としてAI対応カメラを使用して設定され、特定のゴルフショットを識別および録画し、ビデオを処理して各ベイ内のビデオ画面に出力するか、または他の形態では、それらのショットのエンドユーザにビデオを送信することができる。ビデオを処理して、ゴルフ練習場カメラ652によってキャプチャされたビデオにアニメーション、VRグラフィックなどの追加のグラフィックを追加し、メディア体験を向上させることもできる。AIGコース600の一部として示されているが、ゴルフ練習場650は、Topgolf、Rokgolf、または様々な他のゴルフ娯楽施設などの娯楽施設として提供することができる独立型施設とすることができることを理解されたい。 AIG course 600 may also include driving range facilities 650 including driving tee locations 651, driving range cameras 652, one or more driving range radars 653, and driving range RMS 654. Depending on the overall size of the driving range facility 650, additional cameras, radar, and RMS may be provided. According to certain aspects, the driving range facility may be a conventional driving range with grass tees for teeing locations 651 and pin locations within the driving range. In another form, tee location 651 can be a driving bay location that can be used for entertainment similar to the TopGolf experience. For example, a user can reserve a bay within tee location 651 for a certain period of time and practice hitting golf balls toward targets within the driving range. In other forms, each bay may include one or more screens (not explicitly shown) for showing video media of the shot. In certain embodiments, each bay is configured with an AI-enabled camera as a driving range camera 652 to identify and record specific golf shots and process and output the video to a video screen within each bay. or in other forms, the video may be sent to the end user of those shots. The video may also be processed to add additional graphics, such as animations, VR graphics, etc. to the video captured by the driving range camera 652 to enhance the media experience. Although shown as part of the AIG course 600, it is noted that the driving range 650 can be a stand-alone facility that can be provided as an entertainment facility such as Topgolf, Rokgolf, or various other golf entertainment facilities. I want to be understood.
さらなる態様によれば、AIGコース600は、ライブビデオまたは録画および処理されたビデオを含むビデオを、クラブハウス608内の1つまたは複数のビデオ画面に提供することもできる。例えば、ホール#4 604のライブフィードがクラブハウス608内のテレビ画面に表示され得る。一形態では、毎日のニアピンまたはホールインワンの競技をホール#4 604で行うことができ、ライブフィードをクラブハウス内の画面上に提示して、ラウンド後の客に娯楽を提供することができる。いくつかの形態では、デジタルスコアボードはまた、ビデオ内に、またはモバイルアプリケーションの一部として提示されて、競技会がどれだけ近接しており、または誰がリードしているかを示すことができる。 According to further aspects, AIG course 600 may also provide video, including live video or recorded and processed video, to one or more video screens within clubhouse 608. For example, a live feed of hole #4 604 may be displayed on a television screen within clubhouse 608. In one form, a daily near-pin or hole-in-one competition can take place at hole #4 604, and a live feed can be presented on a screen within the clubhouse to provide entertainment to patrons after the round. In some forms, a digital scoreboard may also be presented within the video or as part of a mobile application to show how close the competition is or who is in the lead.
別の態様によれば、プレーヤがクラブハウス608に到着したときにビデオを表示することができ、プレーヤは到着したときに自分のショットを見ることができる。プレーヤは、AIGコース600内で追跡することができる位置デバイス(例えば、ゴルフカート内のGPS、モバイルデバイスからの位置データ、RFIDタグなどを介して)を有することができ、プレーヤがクラブハウス608に入ったことに応答して、到着したゴルファーに固有の録画されたビデオを、レストラン/19番ホール、バーなどのクラブハウス608内の画面に表示することができる。 According to another aspect, the video may be displayed when the player arrives at the clubhouse 608, allowing the player to view his shots upon arrival. A player may have a location device that can be tracked within the AIG course 600 (e.g., via GPS in a golf cart, location data from a mobile device, RFID tag, etc.) and may be tracked within the AIG course 600 when the player is at the clubhouse 608. In response to the entry, a recorded video specific to the arriving golfer may be displayed on a screen within the clubhouse 608, such as the restaurant/19th hole, bar, etc.
他の形態では、ショットは、Topgolf、Toprange、Rokgolfなどの娯楽施設で録画することができる。各ベイは、プレーヤのショットが撮影された直後にキャプチャされたビデオを出力することができるディスプレイを含むことができる。さらに、グラフィックをビデオに追加することができ、いくつかの形態では、分割画面に、画面の片側にゴルファーのビデオを提供することができ、ショット(例えば、上面図)のアニメーションまたはグラフィックビデオがビデオ画面の別の部分に提示される。このようにして、プレーヤは、ボールフライトで実際のスイングを見ることができ、共有、ダウンロード、および視聴のために生成されたビデオにアクセスできるモバイルデバイスまたは他のデバイスを使用してビデオにタグ付けすることができる。 In other forms, shots may be recorded at entertainment venues such as Topgolf, Toprange, Rokgolf, etc. Each bay may include a display that can output captured video immediately after a shot of the player is taken. In addition, graphics can be added to the video, and in some formats, split screen can provide video of the golfer on one side of the screen, animation of the shot (e.g. top view) or graphic video can be added to the video. Presented on a separate part of the screen. In this way, players can see the actual swing in ball flight and can tag the video using their mobile device or other device where they can access the generated video for sharing, downloading, and viewing. can do.
次に図7を参照すると、AI対応ゴルフホールが開示されている。概して700で示されるAI対応ゴルフ(AIG)ホールは、ティーボックス702およびグリーン704を含む。AIGホール700は、図示の単一のティーセットを有するパー3ゴルフホールとして設計されている。必要または所望に応じて、追加のティーおよびティーボックスを使用し、AIGホール700に追加することができることを理解されたい。AIGホール700はまた、ティーボックス702の後ろに配置された第1のAI対応カメラ706と、グリーン704の後ろに配置された第2のAI対応カメラ708とを含む。2カメラシステムとして示されているが、必要または所望に応じて、追加のカメラおよび/またはAI対応カメラをAIGホール700に追加することができる。さらに、第1のAI対応カメラ706は、第1のカメラ視野732を含むことができ、第2のAI対応カメラ708は、第2のカメラ視野734を含むことができる。各視野は、使用前、使用中、および使用後に必要に応じて変更することができる。第1のAI対応カメラ706および第2のAI対応カメラ708は、BoschモデルMIC IP ultra7100iとして提供することができ、図3で上述したようにPTZ機能を含む。他のカメラも考慮され得る。 Referring now to FIG. 7, an AI-enabled golf hole is disclosed. An AI-enabled golf (AIG) hole, shown generally at 700, includes a tee box 702 and a green 704. AIG hole 700 is designed as a par 3 golf hole with a single set of tees as shown. It should be appreciated that additional tees and tee boxes may be used and added to AIG hole 700 as needed or desired. AIG hole 700 also includes a first AI-enabled camera 706 located behind the tee box 702 and a second AI-enabled camera 708 located behind the green 704. Although shown as a two-camera system, additional cameras and/or AI-enabled cameras can be added to AIG hall 700 as needed or desired. Additionally, the first AI-enabled camera 706 can include a first camera field of view 732 and the second AI-enabled camera 708 can include a second camera field of view 734. Each field of view can be changed as necessary before, during, and after use. The first AI-enabled camera 706 and the second AI-enabled camera 708 may be provided as Bosch model MIC IP ultra7100i and include PTZ functionality as described above in FIG. 3. Other cameras may also be considered.
AIGホール700はまた、AIGホール700の近くに配置されたリモートメディアシステム(RMS)710を含む。RMS710は、一般にネットワークメディアサービス(NMS)714として示されているネットワークメディア処理および管理サービス714、ならびにAIGホール700を使用したキャプチャおよび処理の後にビデオまたはデジタルメディアを通信するためのメディア対応宛先716に接続することができる。 AIG Hall 700 also includes a remote media system (RMS) 710 located near AIG Hall 700 . RMS 710 provides network media processing and management services 714, generally designated as network media services (NMS) 714, and media-enabled destinations 716 for communicating video or digital media after capture and processing using AIG Hall 700. Can be connected.
さらなる態様によれば、AIGホール700はまた、オーディオ、ボールストライク、およびプレーヤコメントをキャプチャするためのマイクロフォン718、ゴルファーのスイングおよびボールフライトに関する詳細をキャプチャするためのレーダユニット720、ならびにモバイルデバイス724を有するゴルファーのためのAIGホール700の使用を可能にする使用可能なQRゴルフコード722を含む、ティーボックス702の近くに配置された他のデバイスを含む。一態様では、QRゴルフコード722がデバイスとして提供される。AIGホール700は、グリーン704上に配置され、ピン高さ730を有するピン728を保持するように構成されたピン726をさらに含む。 According to further aspects, AIG Hall 700 also includes a microphone 718 for capturing audio, ball strikes, and player comments, a radar unit 720 for capturing details about the golfer's swing and ball flight, and a mobile device 724. and other devices located near the tee box 702, including an available QR golf code 722 that enables use of the AIG hole 700 for golfers who have a golf course. In one aspect, a QR golf code 722 is provided as a device. AIG hole 700 further includes a pin 726 configured to hold a pin 728 positioned over green 704 and having a pin height 730.
一態様によれば、第1のAI対応カメラ706および第2のAI対応カメラ708は、RMS710によって接続され、電力供給され得る。例えば、RMS710は、遠距離(一例において、PoEのための範囲は、約100メートル、または約328フィートである)にわたってカメラに電力を供給しながら複数のリモートカメラを接続することができるPoEインタフェースなどの通信インタフェースを含むことができる。一態様では、最大4つのPoE給電カメラを1つのメインコンピュータに取り付けることができる。ホールの反対側の端部でコンピュータと通信するメインコンピュータ上のWi-Fi無線機もまた、PoEによって給電されてもよい。各PoEケーブルは、地下に沈められ、RMS710に接続され、それによって電力供給され得る。さらに、マイクロフォン718およびレーダユニット720は、配備されたマイクロフォンまたはレーダユニットのタイプに応じて、マイクロフォンケーブル、イーサネットケーブル、光ファイバケーブル、同軸ケーブルまたはカスタムケーブルを使用してRMS710に直接接続することもできる。一態様によれば、第1のAI対応カメラ706はまた、外部マイクロフォンまたは他のセンサを接続することを可能にするインタフェースを含むことができる。さらに、レーダユニット720は、RMS710に別々に接続される必要はなく、第1のAI対応カメラ706の通信インタフェースを使用して接続することができ、一形態では、第1のAI対応カメラ706を有するハウジングに統合されてもよい。第1のAI対応カメラ706に接続すると説明したが、必要に応じて、1つまたは複数の外部デバイスを第2のAI対応カメラ708に接続できることを理解されたい。 According to one aspect, first AI-enabled camera 706 and second AI-enabled camera 708 may be connected and powered by RMS 710. For example, the RMS710 has a PoE interface that allows you to connect multiple remote cameras while powering the cameras over long distances (in one example, the range for PoE is about 100 meters, or about 328 feet). communication interface. In one aspect, up to four PoE powered cameras can be attached to one main computer. The Wi-Fi radio on the main computer that communicates with the computer at the opposite end of the hall may also be powered by PoE. Each PoE cable may be sunk underground and connected to and powered by the RMS 710. Additionally, microphone 718 and radar unit 720 can also be connected directly to RMS 710 using a microphone cable, Ethernet cable, fiber optic cable, coaxial cable, or custom cable, depending on the type of microphone or radar unit deployed. . According to one aspect, the first AI-enabled camera 706 can also include an interface that allows connecting an external microphone or other sensor. Furthermore, the radar unit 720 need not be separately connected to the RMS 710, but can be connected using the communication interface of the first AI-enabled camera 706; It may be integrated into a housing with. Although described as connected to the first AI-enabled camera 706, it should be understood that one or more external devices can be connected to the second AI-enabled camera 708, if desired.
一態様によれば、AIGホール700は、ゴルファーのプレイを自動的に検出して、ゴルファーのプレイを自動的に録画し、録画されたビデオを処理し、処理されたビデオを効率的に通信またはアップロードすることを可能にする技術を含む。AIGホール700は、録画を起動するための様々な実施形態および実施形態の組合せを達成することができる。一態様によれば、AI対応カメラ706/708の1つまたは複数は、AI対応カメラ706/708に関連する所定のエリア内の1人または複数のゴルファーの存在を検出するように構成することができる。例えば、第1のAI対応カメラ706は、ゴルファーがティーボックス702上にいるときにカメラ内の動きセンサを使用して検出し、ゴルファーがティーボックス702上に存在している間にビデオの録画を開始するように構成され得る。さらに、第2のAI対応カメラ706は、動きセンサを使用して、1人または複数のゴルファーがもはやグリーン704上に存在しないときを検出し、彼らの不在下でビデオの録画を停止するように構成することができる。一形態では、両方のカメラは、ゴルファーが各位置で検出されたときに一緒にまたは独立してオンまたはオフにされてもよい。録画されたビデオは、一緒にタイムスタンプされ、さらなる処理のためにRMS710に通信され得る。このようにして、ゴルファーが存在する場合にのみ限られた量のビデオがキャプチャおよび録画されることができ、それによってAIGホール700上でビデオを記憶、処理、および通信するために必要なメモリおよび処理の量が削減される。 According to one aspect, the AIG hole 700 automatically detects the golfer's play, automatically records the golfer's play, processes the recorded video, and efficiently communicates or communicates the processed video. Including technology that allows you to upload. AIG Hall 700 can implement various embodiments and combinations of embodiments for activating recording. According to one aspect, one or more of the AI-enabled cameras 706/708 can be configured to detect the presence of one or more golfers within a predetermined area associated with the AI-enabled camera 706/708. can. For example, the first AI-enabled camera 706 may detect when a golfer is on the tee box 702 using a motion sensor within the camera and record video while the golfer is on the tee box 702. may be configured to start. Additionally, a second AI-enabled camera 706 uses a motion sensor to detect when one or more golfers are no longer on the green 704 and to stop recording video in their absence. Can be configured. In one form, both cameras may be turned on or off together or independently when a golfer is detected at each location. The recorded videos may be timestamped together and communicated to RMS 710 for further processing. In this way, a limited amount of video can be captured and recorded only when the golfer is present, thereby reducing the memory and The amount of processing is reduced.
さらなる態様によれば、AIGホール700は、無線デバイス、信号およびサービス検出を使用してゴルファーの存在を検出することができる。例えば、ゴルファー、ゴルフカート、時計、モバイルデバイス、または他のデバイスは、RF、Wifi、GPS、Bluetooth、または位置ベースのサービス機能を有することができ、AIGホール700は、必要に応じて1つまたは複数に対応するように変更することができる。例えば、ゴルファーは、AIGホール700の1つまたは複数のデバイスによって検出可能なRFIDチップを有することができる。RFIDチップまたはRFIDタグをゴルファーに留めることができ、ティーボックス702は、RFIDタグがティーボックス702の近くまたは上に位置するときを検出することができるRFIDセンサを含むことができる。他の形態では、ゴルフカートは、カメラがゴルフカートの位置に基づいて録画を開始または録画を終了できるときにトリガするために使用できるGPS位置ベースのサービスを含むことができる。別の態様では、ゴルファーは、AIGホール700によって検出することができる位置またはGPSサービスを提供することができるGPS対応スマートウォッチを有することができる。GPS位置を通信するためのモバイルデバイス、スマートウォッチ、ゴルフウオッチ、スマートフォンもしくはタブレットまたは他のGPSもしくは位置サービス対応デバイスなどの位置サービス対応デバイスであって、AIGホール700は、GPSまたは位置サービスデバイスの位置に基づいてカメラを起動および停止することができる。特定の形態では、ゴルファーは、NMS714と通信し、GPS位置を提供するように構成されたモバイルデバイスおよびモバイルアプリケーションを有することができる。NMS714は、複数のゴルフコースのためにモバイルデバイス724上のモバイルアプリで使用することができるAIGホールの複数のGPS位置を記憶することができる。ユーザがAIGホール700でモバイルデバイス724を能動的に使用すると、モバイルデバイス724は位置をNMS714に通信することができ、ティーボックス702上にあることが検証されると、NMS714は、第1のAI対応カメラ706および第2のAI対応カメラ708を起動するために、起動信号または開始イベントをRMS710に送信することができる。モバイルデバイス724がグリーン704を離れると、モバイルデバイス724は、録画を停止するために非アクティブ化信号または停止イベントをRMS710に送信するのに十分な位置をNMS714に通信することができる。このようにして、位置サービスを使用して、録画をトリガし、AIGホール700でプレイを録画しないことができる。モバイルデバイス724の位置をNMS714に追跡させるものとして説明されているが、RMS710は、NMS714とは無関係にモバイルデバイス724と通信することができることを理解されたい。さらに、プレイ録画をアクティブ化および非アクティブ化するのに十分なサイズのティーボックス702およびグリーン704の周りに、1つまたは複数のジオフェンスを配置することができる。ジオフェンスは、NMS714内に記憶および変更することができる位置サービスの形態であり、モバイルデバイス724およびNMS714は、各ジオフェンスの出入り時にアクティブ化および非アクティブ化を開始することができる。 According to further aspects, AIG Hall 700 can detect the presence of a golfer using wireless devices, signals and service detection. For example, a golfer, golf cart, watch, mobile device, or other device may have RF, Wifi, GPS, Bluetooth, or location-based service capabilities, and AIG Hall 700 may have one or more Can be modified to accommodate multiple. For example, a golfer may have an RFID chip detectable by one or more devices at AIG hall 700. An RFID chip or RFID tag can be affixed to the golfer, and the tee box 702 can include an RFID sensor that can detect when the RFID tag is located near or on the tee box 702. In other forms, the golf cart can include a GPS location-based service that can be used to trigger when the camera can start recording or stop recording based on the golf cart's location. In another aspect, the golfer can have a GPS-enabled smartwatch that can provide location or GPS services that can be detected by AIG Hall 700. A location services-enabled device, such as a mobile device, smart watch, golf watch, smartphone or tablet, or other GPS or location services-enabled device for communicating a GPS location; You can start and stop the camera based on. In certain forms, a golfer can have a mobile device and mobile application configured to communicate with the NMS 714 and provide a GPS location. NMS 714 can store multiple GPS locations of AIG holes that can be used in a mobile app on mobile device 724 for multiple golf courses. When a user actively uses a mobile device 724 in an AIG hall 700, the mobile device 724 can communicate its location to the NMS 714, and once it is verified to be on the tee box 702, the NMS 714 An activation signal or initiation event may be sent to RMS 710 to activate enabled camera 706 and second AI-enabled camera 708. When mobile device 724 leaves green 704, mobile device 724 may communicate its location to NMS 714 sufficient to send a deactivation signal or stop event to RMS 710 to stop recording. In this manner, location services can be used to trigger recording and not record play in AIG Hall 700. Although described as having NMS 714 track the location of mobile device 724, it should be understood that RMS 710 can communicate with mobile device 724 independently of NMS 714. Additionally, one or more geofences may be placed around the tee box 702 and green 704 of sufficient size to activate and deactivate play recording. Geofences are a form of location service that can be stored and modified within NMS 714, and mobile device 724 and NMS 714 can initiate activation and deactivation upon entering and leaving each geofence.
別の態様によれば、ゴルファーはモバイルデバイス724を使用して、モバイルデバイス724に記憶されたモバイルアプリケーションを介して録画をアクティブ化および非アクティブ化することができる。例えば、ゴルファーがショットしようとしているとき、彼らはモバイルアプリケーションを使用し、モバイルアプリケーション内の録画開始アイコンを選択することができる。モバイルデバイス724は、RMS710および/またはNMS714と通信して、AI対応カメラ706/708を使用して録画をアクティブ化することができる。ゴルファーがティーショットを終えたとき、またはグリーンを出た後、ゴルファーはモバイルアプリケーション内の録画停止アイコンを選択することができ、RMS710および/またはNMS714は録画を停止するようにAI対応カメラ706/708に要求を送信することができる。このようにして、ゴルファーは手動開始/停止を使用してAIGホール700での録画を開始することができ、RMS710およびNMS714は、AIGホール700上のカメラの起動に関連して提供されるデバイスまたはプレーヤ識別子を使用してゴルファーのためのビデオを処理することができる。 According to another aspect, the golfer can use the mobile device 724 to activate and deactivate recordings via a mobile application stored on the mobile device 724. For example, when a golfer is about to make a shot, they can use a mobile application and select a start recording icon within the mobile application. Mobile device 724 may communicate with RMS 710 and/or NMS 714 to activate recording using AI-enabled camera 706/708. When the golfer finishes his tee shot or exits the green, the golfer can select the stop recording icon within the mobile application and the RMS 710 and/or NMS 714 will direct the AI-enabled camera 706/708 to stop recording. You can send a request to . In this way, a golfer can initiate recording at AIG Hall 700 using manual start/stop, and RMS 710 and NMS 714 can The player identifier can be used to process the video for the golfer.
一態様によれば、ゴルファーは、AIGホール700のAIゴルフロジック712を使用して検出することができる。例えば、モバイルアプリケーションを有するモバイルデバイス724を使用してQRゴルフコード722をスキャンすることができ、AIGホール700は、QRゴルフコード722がスキャンされるのに応答して1つまたは複数のカメラを起動することができる。 According to one aspect, golfers can be detected using AI golf logic 712 of AIG hole 700. For example, a mobile device 724 having a mobile application can be used to scan a QR golf code 722, and the AIG hall 700 activates one or more cameras in response to the QR golf code 722 being scanned. can do.
さらなる実施形態では、本明細書に記載の技法のうちの1つまたは複数を使用してAI対応カメラを起動すると、第1のAI対応カメラ706および/または第2のAI対応カメラ708は、起動を開始したゴルファーの画像を撮影することができる。衣服の色、肌の色、身長、ゴルフクラブ、または様々な他の属性などのゴルファーの属性は、AIゴルフロジック712を有するAIロジックと比較することができ、AIロジック712をキャプチャ画像と比較するために使用することができる。次いで、比較の結果を使用して、ゴルファーを能動的に録画し、AIロジック比較結果を有するビデオをさらに処理することができる。例えば、比較の結果は、ログファイル、ユーザファイル、AIログファイル、または1人のゴルファーについての単一のエントリ、複数のゴルファーについての一連のエントリ、またはAIGホール700をプレイしたすべてのゴルファーについての毎日のエントリさえも含むことができる他の記憶ファイルに記憶することができる。次いで、ファイルを使用して、録画されたビデオを処理し、識別された各ゴルファーのビデオセグメントを生成することができる。ゴルファーがもはやAIGホール700で検出されなくなると、RMS700は各カメラの録画停止イベントを開始することができ、録画されたビデオは、さらなる処理のためにNMS714に通信される前にAIゴルフロジック712およびRMS710を使用してさらに処理することができる。 In further embodiments, upon activating the AI-enabled camera using one or more of the techniques described herein, the first AI-enabled camera 706 and/or the second AI-enabled camera 708 You can take an image of the golfer who started the game. Golfer attributes such as clothing color, skin color, height, golf club, or various other attributes may be compared to AI logic with AI golf logic 712, and the AI logic 712 is compared to the captured image. can be used for. The results of the comparison can then be used to actively record the golfer and further process the video with the AI logic comparison results. For example, the results of the comparison may be a log file, a user file, an AI log file, or a single entry for one golfer, a series of entries for multiple golfers, or for all golfers who played AIG Hole 700. It can be stored in other storage files that can even contain daily entries. The files can then be used to process the recorded video to generate video segments for each identified golfer. When the golfer is no longer detected at the AIG hole 700, the RMS 700 can initiate a stop recording event for each camera and the recorded video is passed to the AI golf logic 712 and Further processing can be performed using RMS710.
別の態様によれば、モバイルデバイス724を使用するゴルファーは、QRコード(登録商標)またはQRゴルフコード722を使用して録画を開始することができる。QRゴルフコード722は、ゴルフに固有のQRコード(登録商標)であり、特定のゴルフホールに配置された1つまたは複数の特定のリモートカメラを起動するために使用できる少なくとも1つの単一のゴルフホール識別子を含む。QRゴルフコード722は、その特定の位置に配置されたリモートカメラを使用して録画をアクティブ化することを可能にするために、モバイルデバイス724上のモバイルアプリによって解読することができる組込み視覚ロジックを含む。本開示では、モバイルデバイス724を使用して、モバイルアプリを使用してQRゴルフコード722をスキャンし、QRゴルフコード722をキャプチャすることができる。次いで、モバイルデバイス724は、録画セッションを開始するためにAIGホール700の一意の識別子を有するモバイルデバイス724およびユーザのためのセッションを開始するためのメッセージを送信することができる。モバイルデバイス724は、AIGホール700で録画をアクティブ化するために一意のクレデンシャルを有するメッセージを通信することができる。 According to another aspect, a golfer using a mobile device 724 can use a QR code or QR golf code 722 to initiate a recording. QR Golf Code 722 is a golf-specific QR Code that can be used to activate one or more specific remote cameras located at a specific golf hole. Contains hole identifier. The QR golf code 722 has built-in visual logic that can be decoded by a mobile app on a mobile device 724 to enable recording to be activated using a remote camera placed at that particular location. include. In this disclosure, a mobile device 724 may be used to scan and capture the QR golf code 722 using a mobile app. Mobile device 724 may then send a message to initiate a session for mobile device 724 and the user with the unique identifier of AIG Hall 700 to initiate a recording session. Mobile device 724 can communicate a message with unique credentials to activate recording at AIG hall 700.
さらなる態様によれば、QRゴルフコード722およびAIゴルフロジック712を組み合わせて、特定のゴルファーのための録画をアクティブ化、非アクティブ化、および処理することができる。例えば、ゴルファーは、AIGホール700上の特定の位置に配置されたQRゴルフコード722を使用して録画を開始することができ、1つまたは複数のAI対応カメラは、特定のゴルファーのビデオを生成するために処理および使用することができるゴルファーの写真を撮ることができる。モバイルデバイス724から取得されたユーザIDは、画像とペアリングすることができ、AIゴルフロジック712は、ゴルファーに固有のAIログ出力を生成し、録画されたビデオを処理するためにRMS710および/またはNMS714によって使用することができる。 According to further aspects, QR golf codes 722 and AI golf logic 712 can be combined to activate, deactivate, and process recordings for particular golfers. For example, a golfer can initiate a recording using a QR golf code 722 placed at a particular location on the AIG hole 700, and one or more AI-enabled cameras produce video of the particular golfer. You can take photos of golfers that can be processed and used to play. The user ID obtained from the mobile device 724 can be paired with the image, and the AI golf logic 712 generates AI log output specific to the golfer and connects the RMS 710 and/or to process the recorded video. Can be used by NMS714.
さらなる実施形態によれば、QRゴルフコード722は、位置サービス、GPS、動き検出、またはAIGホール700上のカメラおよび録画セッションを起動する方法としての存在を検出する他の方法と組み合わせることができる。追加的に、QRゴルフコード722はまた、印刷または投稿されたQRゴルフコード722の下に配置されたRFIDタグを含むことができる。モバイルデバイス724は、QRゴルフコード722をスキャンするために起動されると、モバイルデバイス724のRFIDリーダを起動することもできる。RFIDリーダを起動することにより、RFIDタグを含むQRゴルフコード722は、ユーザまたはモバイルデバイスがQRゴルフコード722の近くに存在することを確認することができる。したがって、AIGホール700をアクティブ化する前に追加的なレイヤの認証を達成することができ、それによってAIGホール700にリスクをもたらし得るセキュリティリスクまたは脅威を回避する。各RFIDタグは、ゴルフホールごとに具体的に作成され、セッションを開始および認証するためにNMS714に追加および通信することができる固有の認証情報を有する。 According to further embodiments, the QR golf code 722 may be combined with location services, GPS, motion detection, or other methods of detecting the presence of a camera on the AIG hall 700 as a way to activate a recording session. Additionally, the QR golf code 722 can also include an RFID tag placed below the printed or posted QR golf code 722. When the mobile device 724 is activated to scan the QR golf code 722, it may also activate the RFID reader of the mobile device 724. By activating the RFID reader, the QR golf code 722 containing the RFID tag can confirm that a user or mobile device is in the vicinity of the QR golf code 722. Accordingly, an additional layer of authentication can be achieved before activating AIG Hall 700, thereby avoiding security risks or threats that may pose a risk to AIG Hall 700. Each RFID tag is created specifically for each golf hole and has unique authentication information that can be added and communicated to the NMS 714 to initiate and authenticate the session.
別の態様によれば、RMS710は、進行中の録画、処理、およびNMS714へのビデオの配信を支援するために、様々な方法で構成することができる。リモートメディアシステム(RMS)の様々な態様が、図面および方法を通して説明されており、RMS710によって実現することができる。例えば、RMS710を使用して、様々な信号および画像を処理して有効なゴルファーを識別し、ゴルファーの録画を開始することができる。録画されたセッションは、ビデオおよびオーディオ入力を使用してRMS710によって処理されて、ゴルファーがいつゴルフボールを打つかを識別し、ビデオのセグメントをさらにスライスして特定のゴルファーのための処理済みビデオを作成することができる。RMS710はまた、処理済みビデオの効率的で費用効果の高いアップロードを保証するためにビデオを圧縮する。 According to another aspect, RMS 710 can be configured in a variety of ways to support ongoing recording, processing, and delivery of video to NMS 714. Various aspects of a remote media system (RMS) are described throughout the figures and methods and can be implemented by the RMS 710. For example, the RMS 710 may be used to process various signals and images to identify valid golfers and initiate recording of the golfers. The recorded session is processed by the RMS 710 using the video and audio inputs to identify when the golfer hits the golf ball and further slice segments of the video to create a processed video for the specific golfer. can be created. RMS 710 also compresses the video to ensure efficient and cost-effective uploading of processed video.
さらなる態様によれば、RMS710は、AIGホール700に設置された各カメラのエージェントおよびパフォーマンスマネージャとして機能することができる。エージェントとして、RMS710は、デバイス間で通信されるイベントを使用して、特定のゴルファーのためのビデオの録画、およびモバイルデバイス724、NMS714と第1のAI対応カメラ706および第2のAI対応カメラ708との間の通信をネゴシエートする。RMS710はまた、AIGホール700のローカルネットワーク内のデバイスのイベントおよびパフォーマンスの他のデータを記録するために使用することができ、リモートアクセスおよび記憶のためにログファイルをNMS714に通信することができる。RMS710はまた、各デバイスの動作データならびにRMS710に接続された各デバイスの設置および較正データを記憶することができる。一態様では、RMS710は、カメラ、レーダユニット、マイクロフォン、QRコード(登録商標)、および他のセンサなどの各設置デバイスのGPS位置を含むことができる各カメラの初期較正データを含むことができる。一形態では、位置またはカメラ位置を取得し、ティーボックス上のグリーンまたはティー上のフラグまでの距離を決定するために使用することができる。AI対応カメラ706/708は、ヤードスティックなどの基準デバイスで較正することができ、各カメラの特定の光学ズームを取得することができる。ヤードスティックの画像は、ヤードスティックを使用して取得されたピクセル数の組合せで、カメラの視野内のオブジェクトの距離を検出し、記憶するための基準として機能することができる。基準を使用することにより、グリーン704上のピン728がグリーンに沿って移動するとき、ピンの距離は、特定の光学レベルで失われたまたは得られたピクセルの数に基づいて計算することができる。さらに、ティーボックス702上のティー736が移動すると、ティーからカメラまでの距離も決定して記憶することができる。組み合わされると、(カメラからティーまで)から(カメラからピンまで)の距離の差を使用して、ティー736からピン728までの全体的な距離を決定することができる。様々な他のオブジェクトおよび距離をRMS710によって使用して、いくつかの距離を決定することができる。 According to further aspects, RMS 710 can act as an agent and performance manager for each camera installed in AIG hall 700. As an agent, RMS 710 uses events communicated between the devices to record video for a particular golfer, and to communicate with mobile device 724, NMS 714 and first AI-enabled camera 706 and second AI-enabled camera 708. Negotiate communications between. RMS 710 can also be used to record events and other performance data of devices within AIG Hall 700's local network and can communicate log files to NMS 714 for remote access and storage. RMS 710 may also store operational data for each device as well as installation and calibration data for each device connected to RMS 710. In one aspect, RMS 710 can include initial calibration data for each camera, which can include GPS locations of each installed device, such as cameras, radar units, microphones, QR codes, and other sensors. In one form, the position or camera position can be obtained and used to determine the distance to the green on the tee box or the flag on the tee. AI-enabled cameras 706/708 can be calibrated with a reference device, such as a yardstick, to obtain a specific optical zoom for each camera. A yardstick image is a combination of the number of pixels acquired using a yardstick and can serve as a reference for detecting and storing the distance of objects within the camera's field of view. By using the reference, as pin 728 on green 704 moves along the green, the distance of the pin can be calculated based on the number of pixels lost or gained at a particular optical level. . Additionally, as the tee 736 on the tee box 702 moves, the distance from the tee to the camera can also be determined and stored. When combined, the difference in distance from (camera to tee) to (camera to pin) can be used to determine the overall distance from tee 736 to pin 728. Various other objects and distances may be used by RMS 710 to determine some distances.
別の態様では、録画中に各AI対応カメラ706/708および/またはレーダユニット720を使用して、ゴルファーによって行われたショットの詳細をキャプチャすることができる。例えば、第1のAI対応カメラ706はゴルファーのビデオを録画することができ、ビデオを使用して、RMS710および/またはNMS714を使用して、ゴルフボールが打った方向を示すトレースをビデオ上に追加することができる。この場合、ゴルファーのビデオセグメントの各フレームを処理することができ、画像認識およびAIゴルフロジック712を使用してゴルフボールをフレーム内に配置することができる。ボールがフレームごとに移動すると、X/Y座標系がフレーム内でボールを位置決めするように、ビデオ内の位置を識別して記憶することができる。得られたX/Y座標は、録画されたビデオ内でボールが移動した線を描くために使用することができる。フレームの期間にわたって移動した距離、および各フレーム内でボールが到達する高さに応じて、ボールの全体的な速度、ならびに移動したボールの高さ(頂点)およびカーブ(左/右)も決定することができる。 In another aspect, each AI-enabled camera 706/708 and/or radar unit 720 may be used during recording to capture details of the shots made by the golfer. For example, the first AI-enabled camera 706 can record video of the golfer and use the video to add a trace on the video indicating the direction the golf ball was hit using the RMS 710 and/or the NMS 714. can do. In this case, each frame of the golfer's video segment can be processed and image recognition and AI golf logic 712 can be used to place the golf ball within the frame. As the ball moves from frame to frame, the position in the video can be identified and stored such that the X/Y coordinate system positions the ball within the frame. The resulting X/Y coordinates can be used to draw the line along which the ball has moved in the recorded video. Depending on the distance traveled over the duration of the frame and the height reached by the ball within each frame, it also determines the overall speed of the ball, as well as the height (vertex) and curve (left/right) of the ball traveled be able to.
別の形態では、レーダユニット720は、ビデオとともに、またはキャプチャされたビデオとは独立して使用されて、位置およびボール飛行の詳細を検出し、詳細をビデオ処理のためにRMS710および/またはNMS714に通信することができる。上述したように、レーダユニット720は、レーダ技術を使用してボールの速度、距離、高さ、およびカーブをキャプチャし、得られた情報を通信して、ビデオセグメントに付加することができるグラフィックを作成することを可能にすることができる。本開示の出願日の時点でhttps://trackmangolf.com/products/rangeで詳細に説明されている、TrackManによって製造されたTrackMan Rangeなどの1つのそのようなシステムを、必要または所望に応じて使用することができ、または他のレーダシステムを使用することができる。 In another form, radar unit 720 is used in conjunction with the video or independently from the captured video to detect location and ball flight details and send the details to RMS 710 and/or NMS 714 for video processing. Can communicate. As mentioned above, radar unit 720 uses radar technology to capture the velocity, distance, height, and curve of the ball and communicates the resulting information to generate graphics that can be added to the video segment. It can be possible to create. As of the filing date of this disclosure, https://trackmangolf. One such system, such as the TrackMan Range manufactured by TrackMan, described in detail at www.com/products/range, or other radar systems, may be used as needed or desired. be able to.
次に図8を参照すると、自律型メディア処理システムを使用して録画をアクティブ化する方法が開示されている。本方法は、図8に記載された方法を実行するために、システム、デバイス、プロセッサ、モジュール、ソフトウェア、ファームウェア、または様々な他の形態の処理のうちの1つまたは複数によって使用され得る。さらに、図8の方法は、図1~図7、図9~図11の様々な部分内にあるとして実現されてもよく、いくつかの態様では、そこに記載される様々な機能、使用、および特徴を含むように修正されてもよい。 Referring now to FIG. 8, a method of activating recording using an autonomous media processing system is disclosed. The method may be used by one or more of a system, device, processor, module, software, firmware, or various other forms of processing to perform the method described in FIG. Further, the method of FIG. 8 may be implemented as being within various portions of FIGS. and may be modified to include features.
本方法は、一般にステップ800で開始し、所定の活動が行われる様々な地理的位置で使用することができる。一例として、本方法は、ゴルフコースのアクティブ化、ビデオキャプチャ、およびビデオ処理に使用することができる。ステップ802において、本方法は、ゴルファーがゴルフホールで検出されたかどうかを検出する。例えば、ゴルファーは、ゴルフホールのプレーに関連してティーボックスに近づくときに検出され得る。検出は、モバイル内のGPS、RFIDデバイス、Wi-Fi検出、Bluetooth検出、位置サービス、レーダ検出、動き検知、サーマルもしくは熱検知、または様々な他の検知技術を使用することを含む様々な方法で行うことができる。個々のゴルファーの存在を検出することに加えて、1人または複数のゴルファーの存在を示すために、ゴルフカートなどに同様の送信機を設けることができる。他の検出機構も使用され得ることが理解されよう。例えば、一形態では、ビデオを録画するためのアプリケーションを有するモバイルデバイスのゴルファーの位置サービスを検出することができる。例えば、ジオフェンスは、特定のティーボックスの周りに配置することができ、モバイルアプリまたは他のアイテムを有するゴルファーがジオフェンスをトリガすると、ゴルファーを検出することができる。 The method generally begins at step 800 and can be used at various geographic locations where a given activity is performed. As an example, the method can be used for golf course activation, video capture, and video processing. At step 802, the method detects whether a golfer is detected at a golf hole. For example, a golfer may be detected as he approaches a tee box in connection with playing a golf hole. Detection can occur in a variety of ways, including using in-mobile GPS, RFID devices, Wi-Fi detection, Bluetooth detection, location services, radar detection, motion detection, thermal or thermal detection, or various other sensing techniques. It can be carried out. In addition to detecting the presence of individual golfers, similar transmitters can be provided on golf carts and the like to indicate the presence of one or more golfers. It will be appreciated that other detection mechanisms may also be used. For example, in one form, a location service for a golfer on a mobile device that has an application for recording video can be detected. For example, a geofence can be placed around a particular tee box, and when a golfer with a mobile app or other item triggers the geofence, the golfer can be detected.
別の態様によれば、ステップ802において、ユーザは、本明細書で説明するように、モバイルデバイス上のモバイルアプリを使用してQRコード(登録商標)をスキャンすることができる。本方法は、QRコード(登録商標)をキャプチャし、モバイルデバイスまたはアプリ識別子と、録画セッションを開始するためにメッセージに追加されたゴルフホールの一意の識別子を有するQRコード(登録商標)とを送信するために使用される。例えば、本方法は、固有のQRコード(登録商標)をユーザまたはモバイル識別子と組み合わせ、メッセージをサービスに通信するために使用することができ、固有の識別コードおよびユーザを有することができる。 According to another aspect, at step 802, a user can scan a QR code using a mobile app on a mobile device, as described herein. The method captures a QR code and sends the QR code with a mobile device or app identifier and a golf hole unique identifier added to the message to initiate a recording session. used for For example, the method can combine a unique QR code with a user or mobile identifier and use it to communicate a message to the service, which can have a unique identification code and the user.
別の態様によれば、ステップ802において、ゴルファーは、ユーザがモバイルアプリ内の録画アイコンを選択することによって検出されてもよい。例えば、本方法は、録画を開始する要求を含むモバイルデバイス入力を監視するために使用することができる。本方法は、ゴルファーが検出されたことを確認する要求を含むメッセージを送信することができる。一形態では、本方法は、モバイルアプリ識別子とモバイルデバイスの位置とを組み合わせ、それぞれ通信して、ユーザがAI対応カメラを有するゴルフホールにいることを確認することができる。 According to another aspect, at step 802, a golfer may be detected by a user selecting a recording icon within a mobile app. For example, the method can be used to monitor mobile device input including requests to start recording. The method may send a message including a request confirming that the golfer has been detected. In one form, the method may combine and communicate a mobile app identifier and a mobile device location, respectively, to confirm that the user is at a golf hole with an AI-enabled camera.
ゴルファーの存在を検出すると、方法はステップ804に進むことができ、ゴルファーのためのセッションIDを作成することができる。セッションIDは、ゴルファーに固有のものであり、ゴルファーに固有の情報を含み、ゴルファーに固有のID、日時スタンプ、ゴルフホールの位置、およびセッションIDを作成するために使用することができる他の項目を含むことができる。一形態では、本方法は、セッションIDを開始するために使用することができるユーザに関する固有の情報を有することができるゴルファーのモバイルアプリケーションにアクセスするために使用することができる。セッションIDが作成されると、方法はステップ806に進み、特定のゴルフホールにおける1つまたは複数のAI対応カメラおよび任意の関連するマイクロフォンを起動することができる。一形態では、本方法は、作成されたセッションIDにアクセスし、セッションIDを特定のゴルファーにとって有効なIDとして通信することを含むことができる。このようにして、AI対応カメラおよびマイクロフォンは、カメラで手動で記録を開始する必要なく、またはカメラで個人をとらえることなく起動することができる。 Upon detecting the presence of a golfer, the method may proceed to step 804 and a session ID may be created for the golfer. A session ID is unique to a golfer and includes information specific to the golfer, such as a golfer-specific ID, a date and time stamp, the location of the golf hole, and other items that can be used to create the session ID. can include. In one form, the method can be used to access a golfer's mobile application that can have unique information about the user that can be used to initiate a session ID. Once the session ID is created, the method may proceed to step 806 and activate one or more AI-enabled cameras and any associated microphones at a particular golf hole. In one form, the method can include accessing the created session ID and communicating the session ID as a valid ID for a particular golfer. In this way, AI-enabled cameras and microphones can be activated without having to manually initiate recording with the camera or without capturing the individual with the camera.
別の形態では、ステップ806において、QRコード(登録商標)のスキャンを使用してカメラおよびマイクロフォンを起動することができる。例えば、本方法は、ゴルフプレーヤのモバイルデバイスから、プレイ中のゴルフホールのQRコード(登録商標)識別子を受信するステップを含むことができる。QRコード(登録商標)識別子は、有効なスキャンまたはセッションを起動するために、リモートメディアシステムまたはネットワークメディア処理および管理サービスに送信することができる。QRコード(登録商標)識別子が有効である場合、録画ビデオおよび音声を起動するために、RMSまたはAI対応カメラなどのローカルリソースに起動コードを送信することができる。 In another form, scanning a QR code can be used to activate the camera and microphone at step 806. For example, the method may include receiving a QR code identifier of the golf hole being played from the golf player's mobile device. The QR Code identifier can be sent to a remote media system or network media processing and management service to initiate a valid scan or session. If the QR code identifier is valid, an activation code can be sent to a local resource, such as an RMS or AI-enabled camera, to activate the recorded video and audio.
カメラおよびマイクロフォンを起動すると、方法はステップ810に進み、ゴルファーの画像をキャプチャすることができる。例えば、ゴルファーはティーボックス上に位置することができ、起動されたカメラはゴルファーの画像をキャプチャすることができる。別の形態では、ゴルファーは、モバイルアプリ内のスタートアイコンを使用して手動でカメラを起動することができ、方法はゴルファーの画像をキャプチャすることができる。別の形態では、ゴルファーはティーボックスの近くの特定の位置でQRコード(登録商標)をスキャンしていてもよく、カメラはゴルファーの画像をキャプチャすることができる。例えば、AI対応カメラまたはRMSは、スキャンされている特定のQRコード(登録商標)のGPS座標を有することができ、AI対応カメラは、セッションIDでスキャンされている可能性がある特定のQRコード(登録商標)またはその付近でパン、ズーム、チルト、およびフォーカスを行うことができる。したがって、ゴルファーの画像をキャプチャして、将来のビデオキャプチャ内でゴルファーをさらに識別するために使用することができる。 Upon activation of the camera and microphone, the method proceeds to step 810 where an image of the golfer may be captured. For example, a golfer may be positioned on a tee box and an activated camera may capture an image of the golfer. In another form, the golfer can manually launch the camera using the start icon within the mobile app, and the method can capture images of the golfer. In another form, the golfer may be scanning a QR code at a particular location near the tee box, and the camera may capture an image of the golfer. For example, an AI-enabled camera or RMS may have the GPS coordinates of a particular QR code that is being scanned, and an AI-enabled camera may have the GPS coordinates of a particular QR code that is being scanned with a session ID. You can pan, zoom, tilt, and focus at or near the ® . Accordingly, an image of the golfer can be captured and used to further identify the golfer in future video captures.
ゴルファーの画像をキャプチャすると、方法はステップ812に進むことができ、画像は、AI対応カメラまたはゴルフホールにローカルなRMS内のAIロジックおよび/またはNNと比較することができる。場合によっては、本方法は、AIロジックおよび/またはNNを有するクラウドベースのサービスにアクセスして、画像を比較することができる。本明細書に記載のAIロジックを使用して、様々なオブジェクトを識別することができる。例えば、ゴルファーのシャツ、ショートパンツ、帽子、靴、ズボン、ソックス、肌の色、または他の様々な色の衣服の色を識別し、画像を使用してタグ付けすることができる。タグ付けされたデータは、画像のメタデータ内に提供されることができるが、他の形態では、画像データを有する画像ファイルとして提供されてもよく、またはゴルファーのセッションIDとともに提供されてもよい。他の形態では、本方法は、ゴルファーが保持している可能性のあるゴルフオブジェクトを識別するために使用することができる。例えば、AIロジックはまた、アクセスすることができるAIゴルフロジックを含むことができ、画像をAIゴルフロジックと比較してゴルファーを判定または識別することができる。AIゴルフロジックは、本明細書に開示されるように、番号、ゴルフボール、ゴルフティー、ティーボックス、または様々な他のゴルフオブジェクトを有する特定のクラブを識別することを含むことができる。AIロジックおよび/またはAIゴルフロジックを使用してゴルファーのオブジェクトの画像を識別およびタグ付けすることにより、方法を使用してゴルファーに固有のビデオを作成することができる。 Once the image of the golfer is captured, the method may proceed to step 812, where the image may be compared to AI logic and/or NN within the RMS local to the AI-enabled camera or golf hole. In some cases, the method can access a cloud-based service with AI logic and/or NN to compare images. The AI logic described herein can be used to identify various objects. For example, the color of a golfer's shirt, shorts, hat, shoes, pants, socks, skin color, or various other colored clothing can be identified and tagged using images. The tagged data may be provided within the metadata of the image, but in other forms may be provided as an image file with the image data, or with the golfer's session ID. . In other forms, the method can be used to identify golf objects that may be held by a golfer. For example, the AI logic can also include AI golf logic that can be accessed and the image can be compared to the AI golf logic to determine or identify the golfer. The AI golf logic may include identifying a particular club with a number, golf ball, golf tee, tee box, or various other golf objects, as disclosed herein. By identifying and tagging images of golfer objects using AI logic and/or AI golf logic, the method can be used to create golfer-specific videos.
ブロック816において、方法は、ゴルフホールのティーボックスでAIイネーブルカメラを使用してビデオを録画することを可能にし続け、ゴルファーがティーボックスに入ったときを検出することができる。例えば、ステップ810でゴルファーの画像をキャプチャした後、AI対応カメラは、プレイされているティーボックスで必要に応じてパン、チルト、ズームおよびフォーカスを行うことができる。AI対応カメラは、ゴルファーがティーボックスに入ったときを検出することができる。一形態では、記憶されたAIオブジェクト識別子を使用して、ゴルファーがティーボックスに入ったときを検出することができる。他の形態では、AI対応カメラは、画像フレーム内のゾーンをティーボックスの有効な位置としてマークすることができ、ゾーン内でアクティビティがいつ発生し得るかを検出することができる。ゾーンは、設置中にカメラを較正し、特定のティーボックスのゾーンをマークした後に自動的にマークすることができる。ゴルファーがティーボックスに入ったときを検出するのに使用するために、複数のゾーンまたはティーボックスをマークし、AI対応カメラまたはRMS内に記憶することができる。 At block 816, the method may continue to enable recording video using an AI-enabled camera at the tee box of the golf hole to detect when the golfer enters the tee box. For example, after capturing an image of the golfer in step 810, the AI-enabled camera can pan, tilt, zoom, and focus as needed on the tee box being played. AI-enabled cameras can detect when a golfer enters the tee box. In one form, the stored AI object identifier can be used to detect when a golfer enters the tee box. In other forms, the AI-enabled camera can mark zones within the image frame as valid locations for the tee box and can detect when activity may occur within the zone. Zones can be marked automatically after calibrating the camera during installation and marking the zone of a particular tee box. Multiple zones or tee boxes can be marked and stored within the AI-enabled camera or RMS for use in detecting when a golfer enters the tee box.
ユーザを検出すると、本方法はステップ822に進み、ティーボックス上のゴルファーを確認することができる。上述したように、ステップ812および814において様々なオブジェクトが識別されていてもよく、ゴルファーがティーボックス上に存在するときにゴルファーを識別するために使用することができる。ゴルファーが有効でないか、またはIDの欠如のために録画されるべきではないゴルファーであり得る場合、方法はステップ820に戻り、別のユーザがティーボックス上に存在し得るときを検出する。ブロック822において、有効なゴルファーが検出されると、方法はステップ824に進み、ティーボックス上のゴルファーを録画する。次いで、方法はステップ826に進み、ゴルファーがティーボックスを離れたかどうかを判定する。本明細書に記載の様々な方法を使用して、ティーボックス上のゴルファーを検出することができる。ゴルファーがティーボックスを離れていない場合、方法はステップ824に進み、ティーボックス上のゴルファーを録画し続ける。ステップ826において、ゴルファーがティーボックスを離れた場合、方法はステップ828に進み、ゴルファーの録画を停止する。 Upon detecting a user, the method may proceed to step 822 and identify the golfer on the tee box. As discussed above, various objects may be identified in steps 812 and 814 and may be used to identify the golfer when the golfer is on the tee box. If the golfer is not valid or may be a golfer who should not be recorded due to lack of ID, the method returns to step 820 to detect when another user may be present on the tee box. At block 822, if a valid golfer is detected, the method proceeds to step 824 and records the golfer on the tee box. The method then proceeds to step 826 and determines whether the golfer has left the tee box. A golfer on a tee box can be detected using various methods described herein. If the golfer has not left the tee box, the method proceeds to step 824 and continues recording the golfer on the tee box. In step 826, if the golfer leaves the tee box, the method proceeds to step 828 and stops recording the golfer.
録画を停止すると、方法は2つの方向に進むことができ、一方のプロセスは別のゴルファーが存在するかどうかを検出し、他方のプロセスはキャプチャされたビデオを処理する。各プロセスは、直列に、または他の形態で行うことができ、同時に行うことができる。このようにして、第1のゴルファーのビデオを処理およびアップロードすることができ、第2のゴルファーのビデオをキャプチャすることができ、各ゴルファーのビデオの効率的なキャプチャおよび処理、ならびにゴルファーがそれらの録画されたビデオを受信することができるときの遅延の低減を可能にする。 Once recording is stopped, the method can proceed in two directions, one process detecting whether another golfer is present and the other process processing the captured video. Each process can be performed serially or otherwise, and can be performed simultaneously. In this way, a first golfer's video can be processed and uploaded, a second golfer's video can be captured, and each golfer's video can be efficiently captured and processed, and the golfer can Allows for a reduction in delay when being able to receive recorded video.
したがって、ステップ830において、方法は、ゴルファーのためにキャプチャされたビデオおよびオーディオにアクセスし、ステップ832でメディアを処理する。例えば、ビデオおよびオーディオは、各フレームのタイムスタンプを含むデジタル録画であってもよい。しかしながら、フレームは互いに同期していなくてもよい。さらに、特定の期間のオーディオファイルまたはオーディオトラックは、同時にキャプチャされたビデオとオーバーレイされなくてもよい。したがって、必要または所望に応じて、各メディアファイルを処理し、位置合わせし、1つのメディアファイルに組み込むことができる。 Accordingly, in step 830, the method accesses the captured video and audio for the golfer and processes the media in step 832. For example, the video and audio may be digital recordings that include timestamps for each frame. However, the frames may not be synchronized with each other. Additionally, audio files or tracks of a particular time period may not be overlaid with simultaneously captured video. Accordingly, each media file can be processed, aligned, and combined into a single media file as needed or desired.
メディアを処理すると、方法はステップ834に進むことができ、ゴルフボールストライクがいつ発生したかを検出することができる。例えば、メディアファイル、ビデオファイル、および/またはオーディオファイルにアクセスして、ゴルフボールがゴルファーによって打たれたときを検出することができる。ビデオファイルにアクセスするとき、方法は、フレームごとに移動するゴルフボールを識別するために画像処理を使用してビデオファイルの画像データをスキャンすることができる。本方法はまた、AIゴルフロジックを使用して、特定の位置のゴルフクラブ、およびフレーム内の特定の位置から逸脱するゴルフボールを検出することができる。別の形態では、ゴルフボールを打った可能性があるときにオーディオファイルにアクセスして聞くことができる。例えば、この方法は、ゴルフボールの打撃音を比較または探すためにオーディオファイルにアクセスすることを含むことができ、ボールがスタックされたときの特定のフレームを識別することができる。別の態様では、メディアファイル、またはビデオおよびオーディオファイルの両方にアクセスして、ゴルフボールがスタックされたときの視覚画像またはフレームおよびボールがスタックされたときのオーディオフレームを検出することができる。ボールがいつスタックされたかを識別すると、方法は836に進むことができ、ビデオセグメントの開始を識別することができる。例えば、平均的なゴルフスイングは、2秒未満しかかからない可能性がある。したがって、ゴルフボールストライクを使用して、ボールストライク前の2~3秒の期間またはフレーム期間を識別することができる。さらに、本方法は、ゴルファーがティーボックスから退出するときにフレームを識別することができる。このようにして、ビデオの開始部分および終了部分を識別することができ、方法はステップ838に進み、ビデオを最終セグメントにスライスすることができる。このようにして、AI対応カメラによってキャプチャされたビデオの縮小バージョンを効率的に作成およびアップロードすることができ、それによってアップロード速度が向上し、ビデオをアップロードするためのコストが削減される。ビデオセグメントを特定の方法でスライスするように示されているが、ビデオセグメントおよびオーディオセグメントを識別する他の組合せを展開して、後続のアップロードおよび処理のためにビデオおよびオーディオのファイルサイズを縮小するという全体的な利点を得ることができることが理解されよう。8Kおよび4Kビデオなどの様々なビデオフォーマットおよびメディアファイルサイズは、セルラネットワークを介して通信するには大きすぎる場合がある。したがって、ステップ840における方法は、より大きなビデオフォーマットを処理することができ、必要に応じて、H.264フォーマットに変換し、HD、UHD、または他のデジタルメディアファイルフォーマットとしてアップロードすることができる。次いで、方法はステップ842に進むことができ、そこでビデオは、追加の処理のためにネットワーク位置または宛先にアップロードすることができる。一形態では、セッションIDは、RMS、NMS、または他のデバイスもしくはサービスによる追加の処理のためにビデオをアップロードするためのネットワーク宛先を含むことができる。限定はしないが、データファイル、動作ファイル、制御ログ、メタデータ、センサデータ、レーダデータ、および処理されたビデオとともにアップロードすることができる他の形態のデータまたは情報ファイルを含む追加のデータファイルも、セッションIDを使用してアップロードすることができる。 Once the media has been processed, the method can proceed to step 834 and can detect when a golf ball strike occurs. For example, media files, video files, and/or audio files may be accessed to detect when a golf ball is hit by a golfer. When accessing a video file, the method may scan the image data of the video file using image processing to identify the golf ball as it moves from frame to frame. The method may also use AI golf logic to detect a golf club at a particular location and a golf ball that deviates from a particular location within the frame. In another form, you can access and listen to audio files when you may have hit a golf ball. For example, the method may include accessing an audio file to compare or look for the sound of a golf ball hitting, and may identify a particular frame when the ball was stuck. In another aspect, media files or both video and audio files can be accessed to detect visual images or frames of when the golf balls are stacked and audio frames when the balls are stacked. Upon identifying when the ball is stuck, the method can proceed to 836 and identify the beginning of the video segment. For example, an average golf swing may take less than two seconds. Thus, a golf ball strike can be used to identify a 2-3 second period or frame period prior to a ball strike. Further, the method can identify the frame when the golfer exits the tee box. In this manner, the start and end portions of the video can be identified and the method can proceed to step 838 and slice the video into final segments. In this way, reduced versions of videos captured by AI-enabled cameras can be efficiently created and uploaded, thereby increasing upload speeds and reducing the cost of uploading videos. Although shown to slice video segments in a specific way, other combinations that identify video and audio segments can be deployed to reduce video and audio file sizes for subsequent upload and processing It will be appreciated that the overall benefits of this can be obtained. Various video formats and media file sizes, such as 8K and 4K videos, may be too large to communicate over cellular networks. Accordingly, the method in step 840 can handle larger video formats and, if necessary, H. 264 format and upload as HD, UHD, or other digital media file formats. The method can then proceed to step 842, where the video can be uploaded to a network location or destination for further processing. In one form, the session ID may include a network destination to upload the video for further processing by an RMS, NMS, or other device or service. Additional data files may also include, but are not limited to, data files, operational files, control logs, metadata, sensor data, radar data, and other forms of data or information files that may be uploaded with the processed video. You can upload using the session ID.
ステップ828において、方法はまた、ステップ846に進み、別のゴルファーが検出されたか否かを検出することができる。別のゴルファーが検出された場合、方法はステップ804に進み、必要に応じて繰り返す。ステップ846において、追加のゴルファーが検出されない場合、方法はステップ848に進むことができ、カメラおよびマイクロフォンはアイドル状態または電力低下状態に置くことができる。次いで、方法はステップ800に進み、繰り返すことができる。 At step 828, the method may also proceed to step 846 and detect whether another golfer has been detected. If another golfer is detected, the method proceeds to step 804 and repeats as necessary. At step 846, if no additional golfers are detected, the method may proceed to step 848 and the camera and microphone may be placed in an idle or reduced power state. The method can then proceed to step 800 and repeat.
図8の方法は、特定の実施形態において様々な方法または方法シーケンスで構成することができ、ゴルフコースでのユーザ体験の効率的なキャプチャ、処理、および配信を可能にする。図8の方法は、ゴルフコースで特定のQRコード(登録商標)がスキャンされたときを検出し、AI対応カメラを起動してゴルファーを識別し、AIオブジェクトおよびビデオスライスを使用してゴルファーのビデオを録画および処理して、遅延を低減したビデオの効率的なアップロードを作成することを可能にする。 The method of FIG. 8 may be configured in various methods or method sequences in particular embodiments to enable efficient capture, processing, and distribution of user experiences on a golf course. The method in Figure 8 detects when a specific QR code is scanned on a golf course, activates an AI-enabled camera to identify the golfer, and uses AI objects and video slices to create a video of the golfer. allows you to record and process videos to create efficient uploads of videos with reduced latency.
図9は、本開示の一態様による自律型メディア後処理の方法を示す。本方法は、図9に記載された方法を実行するために、システム、デバイス、プロセッサ、モジュール、ソフトウェア、ファームウェア、または様々な他の形態の処理のうちの1つまたは複数によって使用され得る。さらに、図9は、図1~図8および図10~図11の様々な部分内にあるとして実現されてもよく、いくつかの態様では、そこに記載される様々な機能、使用、および特徴を含むように修正されてもよい。 FIG. 9 illustrates a method for autonomous media post-processing according to one aspect of the present disclosure. The method may be used by one or more of a system, device, processor, module, software, firmware, or various other forms of processing to perform the method described in FIG. Further, FIG. 9 may be implemented as being within various portions of FIGS. 1-8 and 10-11, and in some aspects may incorporate the various functions, uses, and features described therein. may be modified to include.
本方法は、一般にステップ901で開始する。ステップ903において、ビデオがリモートビデオソースから受信されると、方法はステップ905に進み、ビデオ内のアクティビティを識別する。本明細書に記載の様々なアクティビティは、ニューラルネットワークとしての機械学習を使用して作成された様々なAIロジック内に記憶することができる。ビデオの一部をAIロジックと比較することができ、アクティビティが検出されない場合、方法はブロック907に進み、ビデオを処理して新しいアクティビティを識別することができる。いくつかの形態では、処理は、アクティビティに固有であり、1つまたは複数のアクティビティのために機械学習によって使用され得るビデオ内のオブジェクトをタグ付けまたは識別することを含み得る。ビデオを処理すると、方法はブロック909に進み、ニューラルネットワーク内に新しいアクティビティを作成すべきかどうかを判定する。例えば、本明細書に記載されているような様々な活動を識別することができるが、いくつかの形態では、アクティビティカテゴリ内のサブアクティビティも作成することができる。この活動の一例は、ゴルフ活動の一形態として、ボールをスライスまたはフックするゴルファー、クラブを投げるゴルファー、別のゴルファーとハイタッチするゴルファー、ホールインワンを行うゴルファー、または作成され得る様々な他のアクティビティまたはサブアクティビティを含むことができる。アクティビティが作成されるべきである場合、方法はステップ911に進み、ビデオの画像フレーム内に存在する使用可能なオブジェクトまたは一連のオブジェクトを識別する。方法は、ステップ913に進み、識別されたオブジェクトにラベルを付け、次いでブロック915に進み、オブジェクトまたはフレームをそのアクティビティのAIロジックに追加することができる。いくつかの形態では、アクティビティが存在する場合、オブジェクトをアクティビティのニューラルネットワークに追加することができ、他の形態では、アクティビティが存在せず、ニューラルネットワークが利用できない場合、方法は、AIロジック内で使用される新しいニューラルネットワークおよび機械学習インスタンスを生成することができる。次いで、方法はステップ917に進み、AIロジックを処理し、ステップ919に進み、アクティビティが有効であり、AIロジック内で公開できるかどうかを判定する。例えば、ニューラルネットワークの精度は、そのアクティビティについて識別されて機械学習インスタンスに提供されるオブジェクトの数に対する依存性を含むことができる。インスタンスが1つしか存在しない場合、AIロジックは失敗する可能性が高い。追加のオブジェクトが識別され、機械学習インスタンス内で使用されると、AIロジックはアクティビティを識別する統計的により良好な機会を有する。そのアクティビティのための追加のオブジェクトが必要な場合、方法は、追加のビデオが受信されるまでステップ901に進む。ステップ919において、アクティビティが現在有効である場合、機械学習インスタンスは、ステップ921においてそのアクティビティのAIロジックを有効にし、必要に応じてAIロジックを様々な場所に配信するためにステップ923に進むことができる。次いで、方法はステップ925に進み、終了する。本方法は、ビデオのズームイン、ビデオのズームアウト、またはビデオ内のパンを含むことができ、ズームイン/アウトまたはパンの程度は、ビデオの検出された態様に基づいてAIロジックによって決定することができる。ズームおよびパンの態様は、自動的に実行されてもよい。
The method generally begins at
ステップ905でアクティビティが識別された場合、方法はステップ927に進み、ビデオが出力または記憶に有効であるかどうかを判定する。例えば、ローカルビデオプロセッサは、配信に十分なビデオを処理していてもよい。したがって、システム900などのリモートビデオプロセッサは、ビデオに提供されるデータを使用して、ビデオが追加の処理を必要とするかどうかを検出することができる。ビデオが出力に有効である場合、方法はステップ929に進み、フォーマットマネージャを使用してビデオをフォーマットすることができる。例えば、ビデオは、ビデオの投稿に関連して必要とされる特定のフォーマット、ファイルサイズ、および他の仕様を有するモバイルデバイスまたはアプリケーションに出力されるようにフォーマットされる必要があり得る。様々な場所およびアプリケーションに提供されるビデオには、Facebook、Youtube、Instagram、Snapchat、および他のアプリケーションが含まれ得る。利用される各アプリは、特定のネットワークに公開するための独自のフォーマットを必要とする場合がある。したがって、フォーマットマネージャは、ビデオの1つまたは複数の位置を決定し、それに応じてフォーマットすることができる。他の形態では、ビデオは、特定のモニタなどの固定出力デバイス上の高精細度または4Kビデオ出力を有するネットワーク位置に配信されるように処理することができる。ビデオを様々な宛先に出力するために、様々なタイプのフォーマットを使用することができる。ビデオをフォーマットすると、方法はステップ931に進み、配信マネージャを使用してフォーマットされたビデオを配信する。例えば、ビデオは、ビデオを記憶するように構成されたクラウドストレージアカウントに配信される単一のインスタンスであってもよい。しかしながら、他の形態では、ビデオは複数のフォーマットにフォーマットされていてもよく、したがって、配信される必要があり得る複数のビデオを作成する。したがって、ステップ931において、ビデオはそれらの宛先に配信される。次いで、方法はステップ925に進み、終了する。
If activity is identified in
ステップ927でビデオが出力に有効でない場合、方法はビデオの処理に進む。例えば、本方法は、ビデオを処理するために使用することができ、特定の順序ではなく、ビデオの処理を説明するための基準としてのみ提供される3つの異なるタイプの処理を含む。ブロック933において、本方法は、1つまたは複数のユーザ処理が実行される必要があるかどうかを判定する。例えば、ローカルビデオプロセッサは、ビデオに録画された特定のユーザに情報を提供することができる。したがって、その情報は、ビデオ内のユーザを識別するために使用することができる。顔認識、ジオフェンシング、GPSまたは位置サービスの位置識別、グリッド識別、ユーザのモバイルアプリからの手動入力、またはビデオ内の特定のユーザを識別するために使用できる様々な他のトリガを含む様々なタイプの識別を使用することができる。本方法はまた、AIロジックを使用して特定のユーザを識別することができ、そのユーザの特性、詳細、および/またはオブジェクトにビデオを提供することができる。ユーザを識別すると、方法はステップ937に進み、ユーザに関連するビデオのセグメントを抽出する。例えば、識別されたユーザは、特定のジャージ番号および名前を有するフットボールプレーヤであってもよい。本方法は、サッカープレーヤが存在するビデオのすべてのセグメントを特定し、それらのセグメントを他のプレーヤから抽出する。別の形態では、ゴルファーは、他のプレーヤとゴルフコースでホールをプレイしていてもよく、ビデオは、他のゴルファーによって撮影された多数の他のショットまたはアクティビティを含んでもよい。したがって、本方法は、ビデオの様々なセグメント内の特定のユーザおよびアクティビティを識別し、ユーザを含まないセグメントを除去することができる。このようにして、ゴルファーだけのビデオを作成することができる。ビデオセグメントを抽出すると、方法はステップ939に進み、ビデオの終端に達したかどうかを判定する。そうでない場合、方法はステップ937に進み、繰り返す。ビデオが終了した場合、方法はステップ941に進み、ビデオが新しいユーザのために処理されるべきかどうかを判定する。例えば、上述したように、複数のゴルファーまたはプレーヤは、キャプチャされた同じビデオの一部であってもよい。したがって、必要に応じて、ブロック935において新しいユーザを識別することができ、方法は上述のように進めることができる。このようにして、特定のユーザに固有の複数のセグメントを単一のビデオから抽出することができ、それによって処理に必要なビデオアップロードの数を減らすことができる。例えば、サッカー場では、単一のビデオをアップロードすることができ、方法は、各プレーヤのビデオ映像を抽出することができ、それにより、各プレーヤ、各プレーヤのチームメイト、および指導者などに提供することができる各プレーヤの固有のビデオセグメントを作成することができる。ブロック941において、複数のユーザが検出され得るが、本方法は、すべてのユーザについて映像セグメントを抽出することを望まない場合があり、特定のユーザのセグメントのみを抽出するためにプロファイルおよびコンテンツマネージャからのプロファイルを含むことができる。
If the video is not available for output at
ステップ941で、追加のユーザセグメントを抽出すべきではないと方法が判断した場合、方法はステップ943に進むことができる。ステップ943において、本方法は、セグメントがさらなる処理を必要とするかどうかを判定する。例えば、ビデオの単一のセグメントのみが抽出される場合、セグメントを結合するための追加の処理は必要とされない。ステップ943でビデオセグメントが追加の処理を必要とする場合、方法はステップ945に進み、各ユーザのセグメントを単一のビデオに結合する。例えば、セグメントは、ビデオまたはビデオセグメントの一部として抽出および記憶することができる。ステップ945において、セグメントを互いに結合して、ユーザのための単一のコンポジットビデオを作成することができる。セグメントを結合すると、方法はステップ947に進み、残りのユーザについてのビデオセグメントを結合して、各ユーザに固有のビデオを作成する。したがって、個々の参加者は、独自の体験のために作成されたセグメントを有する独自のビデオを持つことができる。 If the method determines in step 941 that no additional user segments should be extracted, the method may proceed to step 943. In step 943, the method determines whether the segment requires further processing. For example, if only a single segment of a video is extracted, no additional processing is required to combine the segments. If the video segments require additional processing in step 943, the method proceeds to step 945 and combines each user's segments into a single video. For example, segments can be extracted and stored as part of a video or video segment. At step 945, the segments may be combined together to create a single composite video for the user. Once the segments are combined, the method proceeds to step 947 and combines the video segments for the remaining users to create a unique video for each user. Thus, each participant can have their own video with segments created for their unique experience.
必要に応じてビデオを処理すると、方法はステップ949に進み、ビデオにエフェクトを追加する必要があるかどうかを判定する。例えば、図4のコンテンツマネージャ422または他の自律型コンテンツマネージャなどのコンテンツマネージャは、Omni Barton Creekなどの行楽地であるゴルフホールをプレイしていたゴルファーのビデオを識別することができる。コンテンツマネージャは、プレイ中のゴルフホールのドローンのフライオーバーの紹介ビデオを記憶していてもよく、紹介ビデオをユーザのビデオセグメントに追加してもよい。他の形態では、ホールまでの距離を示すアニメーション化されたグラフィックは、ホールの「トップダウン」ビューから、ティーボックスからグリーンまで描画することができる。他のエフェクトはまた、アクティビティにおいてユーザおよび他のプレーヤのオーディオまたは追加のキャプチャされたビデオを追加することを含むことができる。一形態では、ビデオのセグメントの部分を識別またはタグ付けして、エフェクトの作成の一部としてボールの動きにトレーサを追加することができる。他の例では、AIロジックを使用して、ボールがゴルファーにとって望ましくない場所のグリーンの周りに位置するときを検出することができる。その場合、ボールが森の中に入るとき、トラップ、ウォーターハザードなどの拡張エフェクトをビデオに追加することができる。拡張エフェクトは、アニメーション化されたビデオオーバーレイを含むことができる。例えば、ゴルフボールがウォーターハザードに入るときにゴルフボールを盗むネス湖怪獣のアニメーションをビデオセグメントに追加することができる。必要または所望に応じて、他のアニメーションを使用および追加することもできる。このようにして、拡張現実をユーザのビデオに追加することができる。さらなる態様によれば、ビデオは、ゴルファーによって行われたショットにボールトレース効果を追加することができる。例えば、この方法を使用して、ビデオのフレーム内のゴルフボールを識別し、各フレームに色付きのトレースラインを追加してボールの経路を示すことができる。ビデオがグリーンに入るボールのビデオセグメントを含む場合、ボールがグリーンに着地するときにトレースをビデオに追加することができる。場合によっては、AIロジックまたは画像処理を使用してフレーム内のボールの位置を特定することができ、場合によっては、ボールがグリーン上に位置した後にビデオを反転させることができる。例えば、ユーザがグリーン上で自分のゴルフボールに近づくと、AIロジックまたは画像処理はユーザを識別し、ユーザがボールを拾い上げるかボールに対処する前にエフェクトまたは他のコンテンツを追加することができる。このようにして、ビデオデータの逆の処理を通して、ボールを前のフレームまたはセグメントで遡ることができ、それに応じてビデオをその特定のユーザ向けに修正することができる。別の形態では、エフェクトは、オーディオエフェクト、音楽、またはビデオに追加されたサウンドを含むことができる。例えば、音楽は、ビデオのすべてまたは一部にわたって追加することができ、様々なオーディオレベルを含むことができる。ビデオで何が起こっているかに基づいて、固有の音をビデオに追加することもできる。例えば、ユーザはボールを森の中に打ち込むことができ、「チェーンソー」音、拍手音、笑い声、歓声または他の効果音をビデオセグメントに追加することができる。別の形態では、AIロジックまたは画像処理を使用して、ゴルフボールがいつカップに入るかを識別することができ、「ボールがカップに落ちる」効果音を追加することができる。エフェクトは、AIロジックによって識別されたアクティビティまたはサブアクティビティに基づいて事前に決定することができる。このようにして、本方法は、ビデオセグメント内のラベルにアクセスし、ビデオの部分またはセグメントに所望のエフェクトを自動的に追加することができる。 Once the video has been processed as desired, the method proceeds to step 949 and determines whether effects need to be added to the video. For example, a content manager, such as content manager 422 of FIG. 4 or other autonomous content manager, may identify videos of golfers playing a golf hole that is a recreational area, such as Omni Barton Creek. The content manager may store an introductory video of a drone flyover of a golf hole being played and may add the introductory video to the user's video segment. In other forms, an animated graphic showing the distance to the hole can be drawn from the tee box to the green from a "top down" view of the hole. Other effects may also include adding user and other player audio or additional captured video in the activity. In one form, portions of the video segment can be identified or tagged to add tracers to the movement of the ball as part of creating the effect. In another example, AI logic can be used to detect when the ball is located around the green in an undesirable location for the golfer. In that case, you can add enhanced effects to the video, such as traps, water hazards, etc. when the ball enters the forest. Enhanced effects can include animated video overlays. For example, an animation of the Loch Ness Monster stealing a golf ball as it enters a water hazard may be added to the video segment. Other animations may also be used and added as needed or desired. In this way, augmented reality can be added to a user's video. According to a further aspect, the video can add a ball tracing effect to shots made by the golfer. For example, this method can be used to identify a golf ball within a frame of a video and add colored trace lines to each frame to indicate the ball's path. If the video includes a video segment of the ball entering the green, a trace can be added to the video as the ball lands on the green. In some cases, AI logic or image processing can be used to locate the ball within the frame, and in some cases, the video can be reversed after the ball is located on the green. For example, when a user approaches his golf ball on the green, AI logic or image processing can identify the user and add effects or other content before the user picks up or interacts with the ball. In this way, through reverse processing of the video data, the ball can be traced back to previous frames or segments, and the video modified accordingly for that particular user. In another form, the effects may include audio effects, music, or sounds added to the video. For example, music can be added over all or part of the video and can include varying audio levels. You can also add unique sounds to your videos based on what's happening in the video. For example, a user can drive a ball into a forest, and a "chainsaw" sound, clapping sounds, laughter, cheers, or other sound effects can be added to the video segment. In another form, AI logic or image processing can be used to identify when a golf ball enters the cup, and a "ball falling into the cup" sound effect can be added. Effects can be predetermined based on activities or subactivities identified by AI logic. In this way, the method can access labels within video segments and automatically add desired effects to portions or segments of the video.
必要に応じて効果を追加した後、方法はステップ953に進み、グラフィックをビデオに追加する必要があるかどうかを判定する。追加のグラフィックを追加する必要がない場合、方法はステップ929に進み、終了する。追加のグラフィックが追加される場合、方法はステップ955に進み、図4のコンテンツマネージャ422または必要または所望に応じて他のアセットもしくはコンテンツリソースを使用して、アセット914などのアセットリソースから追加されるコンテンツもしくはグラフィックを取得する。アセットまたはグラフィックは、ビデオ画像またはビデオセグメントに追加するための1つまたは複数のグラフィックを含むことができる。例えば、グラフィックは、ゴルファーの名前、日付、ゴルフコース、ホール番号、ホールまでの距離、ゴルファーが使用したクラブ、現在の気象状態、ボールの最大高さまたはボールが打たれた後のボールの速度、飛行中のボールの曲率、ボールが移動した最大距離、現在のストロークまたはとられたストローク数、ホールのパー、現在プレイしている他のプレーヤ情報、あるいは必要または所望に応じて他のプレーヤ情報またはコース情報などの情報を含むことができる。別の態様によれば、ゴルフコースは、ゴルフコースの名前、ゴルフコースのロゴ、年数または設立時、現在のプロの名前、オーナーの名前、またはゴルフコースがビデオセグメントに追加されることを望む様々な他の種類のマーケティングアセットまたはグラフィックなどの、ビデオのセグメントに追加されるグラフィカルアセットを含むことができる。ゴルフ産業用のアセットを追加するものとして説明したが、必要または所望に応じて他のグラフィカルアセットをビデオに追加することができる。グラフィカルアセットを取得すると、方法はステップ957に進み、アセットまたはグラフィックを特定のビデオ画像またはセグメントに追加してセグメントを変更する。次いで、方法はステップ929に進み、方法は終了する。 After adding effects as needed, the method proceeds to step 953 and determines whether graphics need to be added to the video. If no additional graphics need to be added, the method proceeds to step 929 and ends. If additional graphics are to be added, the method proceeds to step 955 where additional graphics are added from an asset resource, such as asset 914, using content manager 422 of FIG. 4 or other assets or content resources as needed or desired. Get the content or graphics you want. An asset or graphic may include one or more graphics for addition to a video image or video segment. For example, the graphics may include the golfer's name, the date, the golf course, the hole number, the distance to the hole, the club used by the golfer, the current weather conditions, the maximum height of the ball or the speed of the ball after it is hit, the curvature of the ball in flight, the maximum distance traveled by the ball, the current stroke or number of strokes taken, the par of the hole, information about other players currently playing, or other player information as needed or desired. It can include information such as course information. According to another aspect, the golf course may include the name of the golf course, the logo of the golf course, the age or time of establishment, the name of the current professional, the name of the owner, or whatever the golf course wishes to be added to the video segment. may include graphical assets added to segments of the video, such as other types of marketing assets or graphics. Although described as adding assets for the golf industry, other graphical assets can be added to the video as needed or desired. Once the graphical assets are obtained, the method proceeds to step 957 and adds assets or graphics to a particular video image or segment to modify the segment. The method then proceeds to step 929 and the method ends.
図9の方法は、必要に応じて様々な部分を組み合わせたり除去したりするために必要に応じて変更することができる。例えば、ステップ905でアクティビティまたはサブアクティビティを識別すると、方法を使用してビデオをセグメント化し、さらにビデオセグメントを処理してサブアクティビティを識別することができる。セグメントは、そのサブアクティビティを有するものとしてラベル付けすることができ、ラベルをさらに使用して、セグメントの処理、効果の追加、グラフィックの追加、またはビデオセグメントの他の様々なタイプの処理を行うことができる。このようにして、AIロジックを使用する自動化プロセスは、ビデオを手動で個別に修正および編集する必要なしに、ビデオを効率的に編集および処理することができる。
The method of FIG. 9 can be modified as necessary to combine or remove various parts as desired. For example, once the activities or sub-activities are identified in
ビデオが出力に有効である場合、方法はステップ929に進み、フォーマットマネージャを使用してビデオをフォーマットすることができる。例えば、ビデオは、ビデオの投稿に関連して必要とされる特定のフォーマット、ファイルサイズ、および他の仕様を有するモバイルデバイスまたはアプリケーションに出力されるようにフォーマットされる必要があり得る。様々な場所およびアプリケーションに提供されるビデオには、Facebook、Youtube、Instagram、Snapchat、および他のアプリケーションが含まれ得る。利用される各アプリは、特定のネットワークに公開するための独自のフォーマットを必要とする場合がある。したがって、フォーマットマネージャは、ビデオの1つまたは複数の位置を決定し、それに応じてフォーマットすることができる。他の形態では、ビデオは、特定のモニタなどの固定出力デバイス上の高精細度または4Kビデオ出力を有するネットワーク位置に配信されるように処理することができる。必要または所望に応じて、図4のコンテンツマネージャ422または他のアセットもしくはコンテンツリソースを使用して様々な宛先アセット914に出力するためにビデオに様々なタイプのフォーマットを使用できる。アセットまたはグラフィックは、ビデオ画像またはビデオセグメントに追加するための1つまたは複数のグラフィックを含むことができる。例えば、グラフィックは、ゴルファーの名前、日付、ゴルフコース、ホール番号、ホールまでの距離、ゴルファーが使用したクラブ、現在の気象状態、ボールの最大高さまたはボールが打たれた後のボールの速度、飛行中のボールの曲率、ボールが移動した最大距離、現在のストロークまたはとられたストローク数、ホールのパー、現在プレイしている他のプレーヤ情報、あるいは必要または所望に応じて他のプレーヤ情報またはコース情報などの情報を含むことができる。別の態様によれば、ゴルフコースは、ゴルフコースの名前、ゴルフコースのロゴ、年数または設立時、現在のプロの名前、オーナーの名前、またはゴルフコースがビデオセグメントに追加されることを望む様々な他の種類のマーケティングアセットまたはグラフィックなどの、ビデオのセグメントに追加されるグラフィカルアセットを含むことができる。ゴルフ産業用のアセットを追加するものとして説明したが、必要または所望に応じて他のグラフィカルアセットをビデオに追加することができる。グラフィカルアセットを取得すると、方法はステップ957に進み、アセットまたはグラフィックを特定のビデオ画像またはセグメントに追加してセグメントを変更する。次いで、方法はステップ929に進み、方法は終了する。 If the video is valid for output, the method may proceed to step 929 and format the video using a format manager. For example, a video may need to be formatted for output to a mobile device or application with specific formats, file sizes, and other specifications required in connection with posting the video. Videos provided to various locations and applications may include Facebook, YouTube, Instagram, Snapchat, and other applications. Each utilized app may require its own format for publishing to a particular network. Accordingly, the format manager can determine one or more positions of the video and format it accordingly. In other forms, the video may be processed to be delivered to a network location with high definition or 4K video output on a fixed output device, such as a particular monitor. Various types of formats can be used for the video for output to various destination assets 914 using the content manager 422 of FIG. 4 or other assets or content resources as needed or desired. An asset or graphic may include one or more graphics for addition to a video image or video segment. For example, the graphics may include the golfer's name, the date, the golf course, the hole number, the distance to the hole, the club used by the golfer, the current weather conditions, the maximum height of the ball or the speed of the ball after it is hit, the curvature of the ball in flight, the maximum distance traveled by the ball, the current stroke or number of strokes taken, the par of the hole, information about other players currently playing, or other player information as needed or desired. It can include information such as course information. According to another aspect, the golf course may include the name of the golf course, the logo of the golf course, the age or time of establishment, the name of the current professional, the name of the owner, or whatever the golf course wishes to be added to the video segment. may include graphical assets added to segments of the video, such as other types of marketing assets or graphics. Although described as adding assets for the golf industry, other graphical assets can be added to the video as needed or desired. Once the graphical assets are obtained, the method proceeds to step 957 and adds assets or graphics to a particular video image or segment to modify the segment. The method then proceeds to step 929 and the method ends.
別の態様によれば、ステップ953において、方法はまた、グラフィックまたはビデオ強化を含むように後処理を含むことができる。一態様では、プレーヤの名前は、彼らのショットの前に画面上に提供されてもよい。別の態様では、プレーヤのスコアが画面上に提供されてもよい。別の態様では、使用されているクラブを表示することができる。プロの放送に似たビデオを提供するために、様々な他のグラフィックを画面上にオーバーレイすることができる。ビデオにオーバーレイされたグラフィックは、プレーヤまたは再生されているショットに関連する様々なデータを含むことができる。 According to another aspect, in step 953, the method can also include post-processing to include graphics or video enhancement. In one aspect, the player's name may be provided on the screen before their shot. In another aspect, the player's score may be provided on the screen. In another aspect, the club being used can be displayed. Various other graphics can be overlaid on the screen to provide video resembling professional broadcasts. The graphics overlaid on the video may include various data related to the player or the shot being played.
図10は、本開示の一態様によるメディア対応モバイルアプリケーションを使用する方法を示す。本方法は、図5A~図5Dに示すユーザインタフェースを出力するために使用することができ、携帯電話、タブレット、スマートウォッチ、ゴルフカート、プルカート、プッシュカート、動力「追従」カート、ラップトップコンピュータ、または任意の他のモバイルデバイス上で全体的または部分的に使用することができるアプリケーション内に提供することができる。ユーザインタフェース5A~5Dおよび図10の方法を有するモバイルアプリケーションはまた、従来のコンピュータ、インターネットブラウザなどの他のデバイス上にインストール/具現化/アクセス可能であってもよいことが理解されよう。 FIG. 10 illustrates a method of using a media-enabled mobile application according to one aspect of the disclosure. The method can be used to output the user interfaces shown in FIGS. 5A-5D and can be used on mobile phones, tablets, smart watches, golf carts, pull carts, push carts, powered "follow" carts, laptop computers, or may be provided within an application that can be used in whole or in part on any other mobile device. It will be appreciated that the mobile application having the user interfaces 5A-5D and the method of FIG. 10 may also be installed/implemented/accessible on other devices such as conventional computers, internet browsers, etc.
本方法は一般にステップ1000で開始し、本方法は、モバイルアプリケーション内にUIおよびバックグラウンド処理を表示するように進む。一連の決定木は、図10の方法を開始すると起動することができ、モバイルアプリケーション内で実行されるユーザインタフェースまたはプロセス内の選択によって起動することができる。各決定木は、起動に応答して説明されるが、図10内に提示された順序で展開される必要はなく、複数の異なる順序で展開され得る。さらに、丸付きの「A」は、図示された決定木シーケンス内の位置からおよび位置へループする位置を示す。必要または所望に応じて、他のループも使用することができる。 The method generally begins at step 1000, and the method proceeds to display a UI and background processing within the mobile application. The series of decision trees can be activated upon starting the method of FIG. 10, and can be activated by selection within a user interface or process executed within the mobile application. Although each decision tree is described in response to activation, it need not be expanded in the order presented in FIG. 10, and may be expanded in multiple different orders. Additionally, a circled "A" indicates a position to loop from and to a position within the illustrated decision tree sequence. Other loops may also be used as needed or desired.
判断ブロック1002において、モバイルアプリのUI内のホームボタンが選択された場合、方法はステップ1014に進むことができ、ゴルフショットの背景画像またはアニメーションをユーザインタフェース内に表示することができる。アニメーションは、AMPS100または本明細書で提供される他のメディア処理システムを使用して作成されたメディアファイルの一部または全部とすることができる。他の形態では、ユーザは、ホーム画面の背景アニメーションとして提示されるビデオにタグ付けすることができる。ホーム画面を表示すると、方法はステップ1016に進み、モバイルアプリケーションの現在位置に基づく気象サービスを使用して地域気象データを取得する。気象条件を取得すると、それらは、ステップ1018において、モバイルアプリのホーム画面内に提示され得る。次いで、方法はステップ1020に進み、新しいメッセージをホーム画面のメッセージエリア内に提示できるかどうかを判定する。メッセージは、ゴルフコース、他のゴルファー、気象メッセージ、および他の形態のコンテンツから提供することができる。他の形態では、メッセージはまた、他のゴルファーからの通知、新しいコースの開場に関するモバイルアプリプロバイダからの通知、地域のゴルフ情報、ゴルフビデオまたは毎日もしくは毎週のゴルフビデオへのリンク、およびゴルファーに提示することができる様々な他のタイプのメディアコンテンツを含むことができる。新しいメッセージが利用可能である場合、方法はステップ1022に進み、ホーム画面内に新しいメッセージを表示する。新しいメッセージが利用可能な新しいメッセージではない場合、方法は、現在のメッセージなしでホーム画面を表示することに進む。 At decision block 1002, if a home button within the UI of the mobile app is selected, the method may proceed to step 1014, where a background image or animation of the golf shot may be displayed within the user interface. Animation may be part or all of a media file created using AMPS 100 or other media processing systems provided herein. In another form, users can tag videos that are presented as background animations on the home screen. Upon displaying the home screen, the method proceeds to step 1016 and obtains local weather data using the mobile application's current location-based weather service. Once the weather conditions are obtained, they may be presented within the mobile app's home screen at step 1018. The method then proceeds to step 1020 and determines whether a new message can be presented in the message area of the home screen. Messages can come from the golf course, other golfers, weather messages, and other forms of content. In other forms, messages may also include notifications from other golfers, notifications from mobile app providers about new course openings, local golf information, links to golf videos or daily or weekly golf videos, and presentations to golfers. can include various other types of media content that can be used. If a new message is available, the method proceeds to step 1022 and displays the new message within the home screen. If the new message is not a new message available, the method proceeds with displaying the home screen without the current message.
判断ブロック1004において、位置アイコンがモバイルアプリ内で選択された場合、方法はステップ1024に進み、AI対応ゴルフコースを有する位置の地図ビューがモバイルアプリの位置地図内に表示される。例えば、モバイルアプリは、Googleマップにアクセスし、AI対応技術を有するゴルフコースのGPS位置を判定し、地図ビュー内で選択できるカメラのグラフィカルアイコンを追加することができる。次いで、方法は決定ステップ1026に進み、AI対応ゴルフコースのリストビューが選択されたかどうかを検出することができる。リストビューが選択されなかった場合、地図ビューはユーザインタフェース内に提示され続ける。リストビューが選択された場合、方法はステップ1028に進み、利用可能なゴルフコースのリストを表示する。次いで、方法はステップ1030に進み、位置が選択されたかどうかを検出する。位置が選択されていない場合、方法は、以前に選択されたリストビューまたは地図ビューを表示することに進む。ステップ1030で位置が選択された場合、方法はステップ1032に進み、AI対応ゴルフコースのコース詳細を表示する。例えば、コース詳細は、コースの名前および位置、ウェブサイトまたはティータイム購入サイト、ヤード数を含むホールのゴルフホール記述、ホールのグラフィック、ドローンのフライオーバー、または他のホール情報を含むことができる。一形態では、ホールがニアピン、ホールインワン、最長ドライブ、または他の競争などの1つまたは複数の競争を有する場合、特定のホール、競争、および条件に対する賞金額を提示することができる。いくつかの例では、コースの2つ以上のゴルフホールが競争を行うことができ、ゴルフホールおよび賞金のリストもユーザインタフェース内に提示され得る。 If the location icon is selected within the mobile app at decision block 1004, the method proceeds to step 1024 where a map view of the location having the AI-enabled golf course is displayed within the location map of the mobile app. For example, a mobile app can access Google Maps, determine the GPS location of a golf course with AI-enabled technology, and add a camera graphical icon that can be selected within the map view. The method may then proceed to decision step 1026 and detect whether an AI-enabled golf course list view has been selected. If no list view is selected, the map view continues to be presented within the user interface. If list view is selected, the method proceeds to step 1028 and displays a list of available golf courses. The method then proceeds to step 1030 and detects whether a location has been selected. If no location is selected, the method proceeds with displaying the previously selected list view or map view. If a location is selected in step 1030, the method proceeds to step 1032 and displays course details for the AI-enabled golf course. For example, the course details may include the name and location of the course, a website or tee time purchase site, a golf hole description of the hole including yardage, a hole graphic, a drone flyover, or other hole information. In one form, if a hole has one or more competitions, such as a near pin, hole-in-one, longest drive, or other competition, prize amounts for particular holes, competitions, and conditions may be offered. In some examples, two or more golf holes on a course may be competitive, and a list of golf holes and prizes may also be presented within the user interface.
判断ステップ1006において、チェックインまたはスキャンアイコン選択が検出された場合、方法はステップ1034に進み、AI対応カメラを有するゴルフホールにいるときにゴルファーが選択するためのチェックインまたはスキャンアイコンを表示する。次いで、方法はステップ1036に進み、QRスキャンボタンが選択されたかどうかを検出する。ボタンが選択されていない場合、方法はステップ1034に進む。QRスキャンボタンが選択された場合、方法はステップ1040に進み、モバイルアプリケーションおよびユーザのためのセッションIDを作成する。例えば、セッションIDは、モバイルの携帯電話識別子、ユーザ識別子、日時、位置を含むことができる。セッションIDを作成すると、方法はステップ1042に進み、携帯電話のカメラにアクセスし、ユーザがゴルフホールに存在するQRコード(登録商標)をスキャンすることを可能にするためにビューファインダを開く。QRコード(登録商標)は、プレイされているホールのティーボックスの近くに提示される。QRコード(登録商標)は、特定のティーボックスで特定のゴルフコースの特定のホールに対して生成される固有のコードであり、QRスキャンの認証をさらに支援するために下に埋め込まれたRFIDタグも含むことができる。 If a check-in or scan icon selection is detected in decision step 1006, the method proceeds to step 1034 and displays a check-in or scan icon for selection by the golfer while at a golf hole with an AI-enabled camera. The method then proceeds to step 1036 and detects whether the QR scan button is selected. If the button is not selected, the method continues at step 1034. If the QR scan button is selected, the method proceeds to step 1040 and creates a session ID for the mobile application and user. For example, the session ID may include the mobile's cell phone identifier, user identifier, date and time, and location. Once the session ID is created, the method proceeds to step 1042 to access the mobile phone's camera and open the viewfinder to allow the user to scan the QR code present on the golf hole. The QR code(R) is presented near the tee box of the hole being played. A QR Code(R) is a unique code generated for a specific hole on a specific golf course at a specific tee box, with an RFID tag embedded underneath to further assist in the authentication of the QR scan. can also be included.
別の形態では、判断ブロック1044において、ゴルファーがゴルフコードをスキャンする場合、ゴルフホールのAI対応カメラは個人の画像をキャプチャし、AIを使用して画像を処理してゴルファーを識別またはタグ付けすることができる。さらに、本方法は、セッションIDにタイムスタンプを追加することができ、AI対応カメラは、キャプチャされた画像にタイムスタンプを追加することができる。次いで、方法は、セッションIDを提供することに進み、衣服の色、身長、肌の色、またはAIロジックを使用して識別することができる様々な他の属性など、ゴルファーの1つまたは複数の識別されたオブジェクトでタグ付けされた画像をキャプチャすることができる。画像データは、ゴルファーの特徴を検出するためにAIロジックおよびNNによって使用され得る。 In another form, at decision block 1044, if the golfer scans the golf code, the golf hole's AI-enabled camera captures an image of the individual and processes the image using AI to identify or tag the golfer. be able to. Additionally, the method can add a timestamp to the session ID, and the AI-enabled camera can add a timestamp to the captured image. The method then proceeds to provide a session ID and identify one or more of the golfer, such as clothing color, height, skin color, or various other attributes that can be identified using AI logic. Images tagged with identified objects can be captured. Image data may be used by AI logic and NN to detect golfer characteristics.
ステップ1044でQRコード(登録商標)をスキャンすると、方法はステップ1046に進み、ゴルフホールのQRコード(登録商標)内の一意IDを検出し、ステップ1048に進み、AI対応カメラにメッセージを送信してゴルファーの録画を開始する。メッセージは、セッションIDを介して通信することができ、一意ID、プレーヤ名もしくはID、日付およびタイムスタンプ、検出されたAI属性もしくは特徴、またはゴルファーの録画を開始するために使用することができる様々な他のタイプのデータを含むことができる。次いで、本方法は、ステップ1050に進み、ユーザが撮影すべき時間の秒単位のカウントダウンを開始することができる。提案されているように、AI対応カメラは既に録画しているが、カウントダウンを提供することは、ゴルファーに自分のショットを打つことを開始するためのタイムテーブルを提供する。カウントダウンがゼロに達すると、方法はステップ1052に進み、カメラがショットを録画していることを示すために録画画像を点滅アイコンで表示する。また、ステップ1052において、ユーザインタフェースは、ショットが完了したときにユーザがショットの録画を停止することを可能にする録画停止アイコンを表示する。次いで、方法はステップ1054に進み、カメラがショットの録画を停止すべきかどうかを検出することができる。例えば、ユーザは録画停止アイコンを選択し、AI対応カメラにメッセージを送信してユーザの録画を停止することができる。別の形態では、ユーザは録画停止アイコンを選択することを忘れることがある。これが発生したときに必要な場合、本方法は、第2のユーザが新しいセッションをいつ開始するかを検出することを含むことができ、セッションを終了するために1~5分などの時間間隔を使用することができる。他の形態では、方法はまた、AI対応カメラを使用して、ユーザがティーボックス上に存在するかどうかを検出するか、またはティーボックス上にもはや存在しないかどうかを検出する動きセンサを使用することができる。この方法はまた、携帯電話内のGPSを使用して、ユーザがティーボックスから離れて歩いているかどうかを検出することができ、いくつかの形態では、モバイルデバイス内の加速度計を使用して、ユーザが歩いているか、またはゴルフカートに乗っているかどうかを検出することができる。上述した方法の様々な組合せを使用して、ユーザがティーボックス上に存在するときまたは存在しないときを検出することができる。存在の欠如を検出すると、方法はステップ1054に進み、AI対応カメラに信号を送信することによって録画を停止し、次いでステップ1056に進み、録画セッションを終了する。
Upon scanning the QR code in step 1044, the method proceeds to step 1046 to detect the unique ID within the golf hole's QR code and proceeds to step 1048 to send a message to the AI-enabled camera. to start recording the golfer. Messages can be communicated via session ID, unique ID, player name or ID, date and timestamp, detected AI attributes or characteristics, or various other information that can be used to initiate recording of the golfer. It can also contain other types of data. The method can then proceed to step 1050 and begin a countdown in seconds of time for the user to take a picture. As proposed, AI-enabled cameras are already recording, but providing a countdown would provide golfers with a timetable to start hitting their shots. When the countdown reaches zero, the method proceeds to step 1052 and displays the recorded image with a flashing icon to indicate that the camera is recording the shot. Also, in
判断ステップ1008で、マイショットアイコンが選択されると、方法はステップ1058に進み、新規ビデオが受信されたかどうかを識別する。新規ビデオが受信された場合、「新規」バブルアイコンがビデオの最初の画像に追加され、方法はステップ1060に進み、ユーザインタフェース内のユーザにビデオのリストを提示する。一形態では、リストの最上部に最新のビデオを有するリストビューでビデオを提示することができる。他の形態では、リストは、検索後に提示されてもよく、または最も古いものから最も新しいものへと提示される他の形態で提示されてもよい。別の実施形態では、方法は、ユーザが行われたゴルフショットのための様々なグループ、ビデオ、およびメッセージボードを見ることを可能にするグループアイコンを含むように変更することができる。例えば、グループは、その日にユーザとショットを行った各個人を含むことができる。しかしながら、他の形態では、すべてがその日に同じゴルフコースをプレイした可能性があるグループを含むことができる。他の形態では、グループは、様々な他のコースをプレイしている可能性があり、ユーザとビデオを共有したいゴルフ仲間の選択グループとすることができる。 If the My Shots icon is selected at decision step 1008, the method proceeds to step 1058 and identifies whether new video has been received. If a new video is received, a "new" bubble icon is added to the first image of the video and the method proceeds to step 1060 to present a list of videos to the user in the user interface. In one form, videos may be presented in a list view with the most recent videos at the top of the list. In other forms, the list may be presented after a search or in other forms where it is presented from oldest to newest. In another embodiment, the method may be modified to include group icons that allow the user to view various groups, videos, and message boards for golf shots made. For example, a group may include each individual who had a shot with the user that day. However, other forms may include groups that all may have played the same golf course on that day. In other forms, the group may be a selected group of golfing friends who may be playing various other courses and wish to share videos with the user.
ビデオリストを表示すると、方法はステップ1062に進み、ビデオが視聴されるように選択されたかどうかを検出する。ビデオが選択されていない場合、方法はステップ1060に進む。ビデオが選択された場合、方法はステップ1064に進み、ビデオプレーヤを起動して選択されたビデオを視聴することができる。ビデオプレーヤは、モバイルデバイスに常駐するプレーヤとすることができる。他の形態では、ビデオプレーヤは、モバイルデバイス上でビデオを再生するために使用することができるネットワークベースのビデオプレーヤとすることができる。さらに、プレーヤは、ユーザが選択されたビデオを停止、開始、一時停止、スクラブ、ミラーリング、およびダウンロードすることを可能にする様々な制御を含むことができる。ビデオを見ながら様々な他のアクションを使用することもできる。さらに、プレーヤは、ユーザが再生ボタンを選択するまで「アクティブ化」される必要はなく、図5Cに示すような他の選択可能な要素およびコンテンツとともにユーザインタフェース内に提示されることができる。 Upon displaying the video list, the method proceeds to step 1062 and detects whether a video has been selected to be viewed. If no video is selected, the method continues at step 1060. If a video is selected, the method proceeds to step 1064 where a video player may be launched to view the selected video. A video player can be a player that resides on a mobile device. In other forms, the video player can be a network-based video player that can be used to play videos on a mobile device. Additionally, the player may include various controls that allow the user to stop, start, pause, scrub, mirror, and download the selected video. You can also use various other actions while watching the video. Additionally, the player does not need to be "activated" until the user selects the play button and can be presented in the user interface with other selectable elements and content as shown in FIG. 5C.
ビデオプレーヤを起動すると、方法はステップ1066に進み、共有アイコンが選択されたかどうかを検出することができる。例えば、共有アイコンは、ビデオを送信または共有するために選択することができる宛先のリストをアクティブ化することができる。宛先は、Facebook、Instagram、twitter、Snapchat、Pinterest、Youtube、現在のアプリ、または必要または所望に応じて他のアプリなど、共有モードでユーザのモバイルデバイスに利用可能な任意のアプリを含むことができるが、これらに限定されない。宛先はまた、アプリをモバイルデバイスにローカルに保存すること、またはビデオおよび写真を保存するためのクラウドサービスを用いて保存することを含むことができる。本方法はまた、「マイビデオを見る」セレクタ、「ビデオをコピー」セレクタ、「リンクをコピー」セレクタ、およびビデオを削除するための削除セレクタを提示することを含むことができる。ブロック1068において、方法はまた、ユーザインタフェース内の「プロと共有」アイコンを表示することができる。「プロと共有」アイコンにより、ユーザはビデオをキャプチャしたコースで共有したい地元のゴルフプロを選択することができる。例えば、ビデオは、ビデオが撮影された位置IDを含むことができ、そのゴルフコースの地元プロと共有して、ビデオ上でゴルフ助言を取得することができる。 Upon launching the video player, the method may proceed to step 1066 and detect whether a share icon has been selected. For example, a share icon can activate a list of destinations that can be selected to send or share the video. The destination may include any app available on the user's mobile device in shared mode, such as Facebook, Instagram, Twitter, Snapchat, Pinterest , YouTube, the current app, or other apps as needed or desired. However, it is not limited to these. Destinations may also include saving the app locally on the mobile device or using a cloud service for storing videos and photos. The method may also include presenting a "Watch My Video" selector, a "Copy Video" selector, a "Copy Link" selector, and a delete selector for deleting the video. At block 1068, the method may also display a "Share with Pros" icon in the user interface. The "Share with Pros" icon allows the user to select a local golf professional whose course they would like to share their video with. For example, the video can include the location ID where the video was taken and can be shared with local pros at that golf course to obtain golf advice on the video.
ブロック1070において、共有選択が検出され、方法はステップ1072に進み、「プロと共有」アイコンが選択されたか否かを検出する。「プロと共有」アイコンが選択されていない場合、方法はステップ1080に進み、選択された宛先を識別し、ビデオへのリンクを選択された宛先と共有する。一形態では、本方法は、「私のホールインワンを見て!」、「ペブルビーチからの私のショットです!」、「TopGolfで私の子供と一緒!!!」などのビデオのデフォルトテキスト、またはビデオが撮影された位置に基づいてデフォルトとして作成することができる様々な他のメッセージを追加することができる。他の形態では、ユーザは、ビデオリンクに追加する独自のメッセージを提供することができ、所望の宛先にリンクを送信することができる。 At block 1070, a share selection is detected and the method proceeds to step 1072 to detect whether the "Share with Pros" icon has been selected. If the "Share with Pros" icon is not selected, the method proceeds to step 1080 to identify the selected destination and share the link to the video with the selected destination. In one form, the method provides default text for videos such as "Look at my hole-in-one!", "Here's my shot from Pebble Beach!", "With my kids on TopGolf!!!", or Various other messages can be added that can be created as defaults based on the location where the video was taken. In other forms, users can provide their own messages to add to the video link and can send the link to the desired destination.
ステップ1072において、ユーザがプロと共有することを選択した場合、方法はステップ1074に進み、ビデオが撮影されたコースの地元のプロのリストを表示する。例えば、ゴルフコースは複数のプロを有してもよく、そのコースの各プロのリストが提示されてもよい。他の形態では、その日のコースに来場し得るプロのリストのみを提示するように方法を変更することができ、またはゴルファーにチップを提供する一部でありたい場合がある。別の形態では、プロが来場しない場合があり、「プロと共有」アイコンがユーザインタフェース内に提示されない場合があり、または空のリストがユーザインタフェース内に「すぐに戻ってきて!」または同様のメッセージとともに提示される場合がある。利用可能な場合、ユーザがプロを選択すると、方法はステップ1076に進み、どのプロと共有するかを検出し、次いでステップ1078に進み、ビデオのリンクを選択されたプロに送信する。リンクは、テキストメッセージ、電子メール、アプリ内メッセージ、通知、または様々な他の通信を介して送信することができ、「Jon Luxはビデオを共有しており、無料の助言を希望している!」などのメッセージ、または変更または追加することができる様々な他のメッセージを含むことができる。一形態では、メッセージは、送信者および/または受信者の実際の携帯電話番号を含んでも含まなくてもよいテキストメッセージとして送信することができる。本方法は、ユーザまたはプロが携帯電話番号をテキストメッセージの一部として表示させないように変更することができる。本方法は、電子メール、アプリメッセージング、通知、または様々な他の形態の通信にも使用することができる。
If the user selects to share with professionals at
ステップ1010で、プロファイルアイコンが選択されると、方法はステップ1080に進み、アカウントアイコンを表示し、ブロック1082に進み、ユーザのプロファイルアイコンを表示する。ステップ1084で、アカウントアイコンが選択された場合、方法はステップ1086に進み、ユーザ名およびパスワードセクションを表示し、次いでステップ1088に進み、支払い情報セクションを表示する。次いで、方法はステップ1090に進むことができ、ユーザが修正するセクションを選択した場合、ユーザは選択された情報を修正することができる。例えば、ユーザは、新しいユーザ名、パスワード、電子メールアドレス、プライバシー設定、または他の様々な種類のアカウント情報を入力することができる。一形態では、本方法は、ユーザが閲覧またはアクセスすることができる条項への条項リンクを提供することもできる。別の形態によれば、ユーザは、アカウント情報の一部として支払い情報を追加することができる。例えば、支払い情報は、クレジットカード情報などの従来の支払いを含むことができるが、Venmo、Paypal、Bitcoin、または様々な他の支払い方法などの他の支払いも含むことができる。支払い方法は、モバイルアプリを介してスケジュールされたゴルフのラウンド、ニアピン、ホールインワン、最長ドライブ、競争などの競争またはゲームの支払いに使用することができる。支払いはまた、ユーザと他のユーザとの間のゴルフコースでプレイすることができる個人またはグループの賭け金の支払いに使用することができる。ステップ1090でアカウントが修正された場合、方法はステップ1092に進み、新しいアカウント情報を確認して保存することができる。 If the profile icon is selected in step 1010, the method proceeds to step 1080 and displays the account icon and proceeds to block 1082 to display the user's profile icon. If the account icon is selected at step 1084, the method proceeds to step 1086 to display the username and password section, and then proceeds to step 1088 to display the payment information section. The method can then proceed to step 1090, where if the user selects a section to modify, the user can modify the selected information. For example, a user may enter a new username, password, email address, privacy settings, or various other types of account information. In one form, the method may also provide clause links to clauses that the user can view or access. According to another aspect, the user can add payment information as part of the account information. For example, payment information may include traditional payments such as credit card information, but may also include other payments such as Venmo, PayPal, Bitcoin, or various other payment methods. Payment methods can be used to pay for rounds of golf, competitions or games such as near pin, hole-in-one, longest drive, competition, etc. scheduled via the mobile app. Payments can also be used to pay individual or group bets that can be played on a golf course between the user and other users. If the account is modified in step 1090, the method proceeds to step 1092 where the new account information can be verified and saved.
ステップ1084でアカウントセクションが選択されていない場合、方法はステップ1086に進み、プロファイルセクションが選択されているかどうかを検出することができる。プロファイルセクションが選択されていない場合、方法はブロック1080に進むことができる。ステップ1086でプロファイルセクションが選択された場合、方法はブロック1094に進み、ユーザのプレーヤプロファイルを表示することができる。プレーヤプロファイルは、プレーヤ画像または写真、アカウントセクション内のユーザ名とは異なる可能性があるプレーヤ名、生年月日または年月日、ハンディキャップ、年間にプレイされたゴルフの回数、プロティー、男性用レギュラー、シニアティー、ジュニアティー、レディーティー、または他のティーなどの好みのティーを含むことができる。プレーヤプロファイルはまた、プレーヤがどのボールを使用したいか、およびゴルファーが使用しているクラブ、パター、およびウェッジの名前およびタイプを含むことができる「バッグの中のもの」セクションを含むことができる。例えば、ゴルフは、Callowayドライバ、Titleist Hybrid、Mizunoアイアン、Volkeyウェッジ(52度および60度)、およびScotty Cameronパターを使用することができる。プレーヤプロファイルを設定するときに、様々な製造業者をゴルファーに提示することができる。プレーヤプロファイル情報の一部または全部は、ユーザごとに作成されたビデオにメディア情報として付加することができる。さらに、プレーヤプロファイル情報は、データベース内に記憶され、プレーヤプロファイルに応じて新しい製品およびサービスをプレーヤにマーケティングするために使用することができる各プレーヤに関する情報を検出するために使用することができる。このようにして、データベースを使用して、プレーヤが自分のゲームを改善するのを助けることができ、製品およびサービスプロバイダがマーケティングするためのプラットフォームとしても機能することができる新しい製品およびサービスをユーザに知らせることができる。プレーヤプロファイルを変更すると、方法はステップ1098に進み、プロファイルを更新する。一例では、本方法は、ユーザが自分のプロファイルの一部を更新した場合に、ユーザが新しいプロファイルの共有を選択された宛先に送信できるように変更することができる。例えば、ユーザは、自分のハンディキャップが変化したことや、新しいドライバやパターを買ったばかりであることを共有したい場合がある。プレーヤプロファイルの様々な要素は、必要または所望に応じて変更および共有することができる。 If the account section is not selected at step 1084, the method may proceed to step 1086 and detect whether the profile section is selected. If no profile section is selected, the method may proceed to block 1080. If the profile section is selected at step 1086, the method may proceed to block 1094 and display the user's player profile. The player profile includes the player image or photo, player name which may be different from the username in the account section, date of birth or year, handicap, number of golf games played per year, pro tees, men's It can include your favorite tees such as regular, senior tee, junior tee, lady tee, or other tees. The player profile can also include a "What's in the Bag" section that can include which balls the player wants to use and the names and types of clubs, putters, and wedges the golfer is using. For example, golfers may use the Callaway driver, Titleist Hybrid, Mizuno irons, Volkey wedges (52 degrees and 60 degrees), and Scotty Cameron putters. Various manufacturers may be presented to the golfer when setting up a player profile. Some or all of the player profile information can be added as media information to videos created for each user. Additionally, player profile information is stored in a database and can be used to discover information about each player that can be used to market new products and services to the player according to the player profile. In this way, the database can be used to introduce new products and services to users that can help players improve their games and can also serve as a platform for product and service providers to market. I can let you know. Upon changing the player profile, the method proceeds to step 1098 and updates the profile. In one example, the method can be modified to allow a user to send a new profile share to a selected destination if the user updates a portion of his or her profile. For example, a user may want to share that their handicap has changed or that they just bought a new driver or putter. Various elements of a player profile can be modified and shared as needed or desired.
ステップ1012で新規ビデオが受信された場合、方法はステップ1001に進み、ユーザのモバイルデバイスにメッセージを送信する。メッセージは、テキストメッセージ、アプリ内メッセージ、通知、電子メール、メッセンジャーアプリテキスト、または新規ビデオが視聴可能であることをメッセージする様々な方法とすることができる。方法はまた、ステップ1003に進むことができ、新規ビデオが利用可能であることを示すために、モバイルアプリに関連付けられたバッジを変更することができる。例えば、アプリケーション名およびロゴを更新して、モバイルアプリケーション内で利用可能な新規ビデオ数を表示することができる。別の形態では、最新のビデオをリンクとしてモバイルアプリに追加することができ、マイビデオアイコンまたはマイショットアイコンなどのアプリ内アイコンを新規ビデオ数で更新することができる。マイビデオまたはショットセクション内で、「新規」バブル参照は、新規ビデオのビデオ画像への部分オーバーレイとして提示することができる。別の態様によれば、ステップ1012は、メッセージを含めるかまたは追加するように修正され得る。この方法を使用して、新しい投稿またはビデオがアップロードされたというメッセージを、モバイルアプリ内の1つまたは複数のグループに送信することができる。例えば、ユーザがモバイルアプリのグループ共有内に含まれる場合、1人または複数のユーザの利用可能なビデオのメッセージをグループ内の他のユーザに送信して、ビデオが利用可能であることを示すことができる。グループメッセージの利用可能性は、アイコン上の異なる色および位置を有する別個のバブルアイコンとしてアプリアイコンまたはマイショットアイコンに追加することもできる。このようにして、グループ内のゴルファーは、サードパーティのメッセージングプラットフォームを使用する必要なく、ビデオ、ショット、競技会、または他のメッセージに関するメッセージおよびビデオを互いに通信することができ、それにより、全体的なゴルフ体験をモバイルデバイス上の同じアプリケーション内に保つことができる。 If a new video is received at step 1012, the method proceeds to step 1001 and sends a message to the user's mobile device. The message can be a text message, an in-app message, a notification, an email, a messenger app text, or various ways to message that a new video is available for viewing. The method may also proceed to step 1003, where a badge associated with the mobile app may be changed to indicate that a new video is available. For example, the application name and logo can be updated to display the number of new videos available within the mobile application. In another form, the latest videos can be added as links to the mobile app and an in-app icon, such as the My Videos icon or the My Shots icon, can be updated with the number of new videos. Within the My Videos or Shots section, a "new" bubble reference may be presented as a partial overlay to the video image of the new video. According to another aspect, step 1012 may be modified to include or add messages. Using this method, a message that a new post or video has been uploaded can be sent to one or more groups within the mobile app. For example, if a user is included in a group share on a mobile app, sending a message of one or more users' available videos to other users in the group to indicate that the video is available. Can be done. Group message availability can also be added to the app icon or My Shots icon as a separate bubble icon with a different color and position on the icon. In this way, golfers in a group can communicate messages and videos to each other about videos, shots, competitions, or other messages without having to use a third-party messaging platform, thereby improving the overall The best golf experience can be kept within the same application on your mobile device.
図11は、本開示の一態様による多視点AI対応ゴルフホールを示すブロック図を示す。概して1100で示される多視点AI対応ゴルフホール(MAIGホール)は、複数のティー1104を有するティーボックス1102と、ピン高さ1112を有するピン1110を保持するホール1108を有するグリーン1106とを含む。ティーボックス1102は、第1のティーボックスAI対応カメラ(TCAM1)1114、第2のティーボックスAI対応カメラ(TCAM2)1116、第3のティーボックスAI対応カメラ(TCAM3)1118を含む。MAIGホール1100はまた、ティーボックス1102の近くに配置されたティーボックスレーダユニット1120を含む。グリーン1106はまた、グリーン1106の周りに配置された第1のグリーンサイドAI対応カメラ(GCAM1)1122、第2のグリーンサイドAI対応カメラ(GCAM2)1124、第3のグリーンサイドAI対応カメラ(GCAM3)1126を含む。ティーボックス1102はまた、ティーサイドマイクロフォン1128を含み、グリーン1106はまた、グリーンサイドマイクロフォン1130を含む。MAIGホール1100はまた、ティーボックス1102から離れて配置された第2のレーダユニット1132を含み、MAIGホール1100上の動きを検出するための1つまたは複数のセンサアレイを含むことができる。ティーボックス1102はまた、複数のティー1104のうちの1つまたは複数にQRゴルフコード1146を含む。 FIG. 11 shows a block diagram illustrating a multi-view AI compatible golf hole according to one aspect of the present disclosure. A multi-view AI-enabled golf hole (MAIG hole), indicated generally at 1100, includes a tee box 1102 with a plurality of tees 1104 and a green 1106 with a hole 1108 that holds a pin 1110 having a pin height 1112. The tee box 1102 includes a first tee box AI compatible camera (TCAM1) 1114, a second tee box AI compatible camera (TCAM2) 1116, and a third tee box AI compatible camera (TCAM3) 1118. MAIG hall 1100 also includes a tee box radar unit 1120 located near tee box 1102. The green 1106 also includes a first greenside AI-compatible camera (GCAM1) 1122, a second greenside AI-compatible camera (GCAM2) 1124, and a third greenside AI-compatible camera (GCAM3) arranged around the green 1106. Contains 1126. Tee box 1102 also includes a tee side microphone 1128 and green 1106 also includes a green side microphone 1130. MAIG hole 1100 also includes a second radar unit 1132 located remotely from tee box 1102 and may include one or more sensor arrays to detect movement on MAIG hole 1100. Tee box 1102 also includes a QR golf code 1146 on one or more of the plurality of tees 1104.
MAIGホール1100はまた、AIゴルフロジック1148を有するリモートメディアシステム(RMS)1136にMAIGホール1100の様々な構成要素を接続する通信インタフェース1134を含む。MAIGホール1100は、MAIGホール1100の様々な部分に電力を供給するように構成されたゴルフコース電力(GCP)源1138をさらに含む。RMS1136は、NMS1140に録画およびアップロードされたビデオを処理するように構成されたネットワークメディア処理および管理サービス(NMS)1140と通信するように構成される。NMS1140は、MAIGホール1100およびNMS1140を使用して作成されたデジタルメディアを受信するように動作可能な1つまたは複数の宛先1142と通信するように構成される。図11には、MAIGホール1100とともに使用するように動作可能なモバイルデバイス1144も示されている。 The MAIG hall 1100 also includes a communication interface 1134 that connects various components of the MAIG hall 1100 to a remote media system (RMS) 1136 having AI golf logic 1148. MAIG hall 1100 further includes a golf course power (GCP) source 1138 configured to power various portions of MAIG hall 1100. RMS 1136 is configured to communicate with a network media processing and management service (NMS) 1140 that is configured to process video recorded and uploaded to NMS 1140. NMS 1140 is configured to communicate with one or more destinations 1142 operable to receive digital media created using MAIG hall 1100 and NMS 1140. Also shown in FIG. 11 is a mobile device 1144 operable for use with MAIG Hall 1100.
別の態様によれば、TCAMS1~3(1114、1116、1118)およびGCAMS1~3(1122、1124、1126)は、MAIGホール1100に時々設置および較正することができる。例えば、各カメラは、サーベイおよびGPSデータを使用して設置され、各設置の正確な位置および全高をキャプチャすることができる。例えば、いくつかのカメラは、MAIGホール1100のトポロジーに応じて他のカメラよりも高く配置され得る。各カメラの正確な位置をキャプチャすることにより、各カメラ間の距離を決定することができ、画像データを使用して、各カメラによってキャプチャされた画像またはビデオ内で検出された様々なオブジェクトの位置を三角測量することができる。いくつかの形態では、1つまたは複数のカメラは、MAIGホール1100上に設置されたカメラの座標の位置を特定するのを支援するための組込みGPS機能を含むことができる。各カメラの特定の位置を有することにより、オブジェクトの距離測定を達成することができる。例えば、GCAM1 1122およびGCAM3 1126は、ホール1108、ピン1110、ピン高さ1112、ティー1104、プレイ時のゴルファーの位置、ホール1108までの距離、打った後に移動したボールの距離、グリーン1106に着地した後にボールがホール1108にあることができる距離、またはMAIGホール1100上の領域またはオブジェクトまでの様々な他の距離を三角測量するために使用することができる。他のカメラも使用され得る。さらに、グリーン1106の上および周囲の様々な位置を三角測量して、グリーン1106の領域の仮想グリッドまたは地図を作成することができる。画像フレーム内のオブジェクトを識別するために使用できるAI対応カメラを使用してMAIGホール1100(様々なグラスカット、フェアウェイ、ファーストカット、ラフカット、フリンジ、サンド、ウォーターなどを含む)がマッピングされることにより、MAIGホール1100のプレイ中に効率的な距離計算を作成および使用することができる。 According to another aspect, TCAMS 1-3 (1114, 1116, 1118) and GCAMS 1-3 (1122, 1124, 1126) may be installed and calibrated in MAIG hall 1100 from time to time. For example, each camera can be installed using survey and GPS data to capture the exact location and overall height of each installation. For example, some cameras may be placed higher than others depending on the topology of MAIG hall 1100. By capturing the exact location of each camera, the distance between each camera can be determined, and the image data can be used to determine the location of various objects detected within the images or videos captured by each camera. can be triangulated. In some forms, one or more cameras may include built-in GPS functionality to assist in locating the coordinates of the cameras installed on the MAIG hall 1100. By having a specific position of each camera, object distance measurement can be achieved. For example, GCAM1 1122 and GCAM3 1126 record the hole 1108, pin 1110, pin height 1112, tee 1104, the golfer's position at the time of play, the distance to hole 1108, the distance the ball traveled after hitting it, and the distance it landed on green 1106. It can later be used to triangulate the distance the ball can be in the hole 1108, or various other distances to areas or objects on the MAIG hole 1100. Other cameras may also be used. Additionally, various locations on and around the green 1106 can be triangulated to create a virtual grid or map of the area of the green 1106. MAIG holes 1100 (including various grass cuts, fairways, first cuts, rough cuts, fringe, sand, water, etc.) are mapped using an AI-enabled camera that can be used to identify objects within the image frame. , efficient distance calculations can be created and used while playing MAIG Hole 1100.
さらなる態様によれば、MAIGホール1100は、RMS1136またはNMS1140によって管理することができる毎日の較正ルーチンを含むことができる。例えば、環境条件によっては、光学ビュー性能が時々変化し、カメラの焦点がわずかにドリフトする可能性がある。このドリフトは、MAIGホール1100内のオブジェクトの距離の測定誤差をもたらす可能性がある。したがって、初期設定中に、特定の高さを有する基準を設けることができる。基準は、測定スティックまたは測量員のポールなどの一時的な基準とすることができる。他の形態では、カメラ(明示的には図示せず)の各々についてポールの高さをマークし、毎日の較正のための基準として、または画像キャプチャ品質が変化し得るときに使用することができる。他の形態では、ピンの高さは、各カメラを較正するために使用される特定の高さを決定するための基準として使用することができる。 According to further aspects, MAIG hall 1100 can include a daily calibration routine that can be managed by RMS 1136 or NMS 1140. For example, depending on environmental conditions, the optical view performance may change from time to time and the camera focus may drift slightly. This drift can result in measurement errors in the distances of objects within the MAIG hole 1100. Thus, during initialization, a fiducial with a certain height can be provided. The reference may be a temporary reference such as a measuring stick or a surveyor's pole. In other forms, the pole height can be marked for each of the cameras (not explicitly shown) and used as a reference for daily calibration or when image capture quality may vary. . In other forms, the pin height can be used as a reference to determine the specific height used to calibrate each camera.
他の形態では、カメラの各々は、光学ズームレベルまたはデジタルズームレベルに基づいて較正することができる。例えば、GCAM1 1122が10倍の光学ズーム能力を含む場合、GCAM1 1122は一連のズームレベル(例えば、1X、2X、5X、10Xなど)に設定され、基準オブジェクトを使用して較正され得る。このようにして、基準オブジェクトの全体サイズを各カメラまたはRMS1134内に記憶し、距離を計算するために使用することができる。別の形態では、基準オブジェクトのズームレベルに存在する画素の数を決定することができ、カメラのズームレベルが変更されると、画素の数はズームレベルごとに変更され、オブジェクトの距離を決定するために記憶し、後で使用することができる。例えば、1倍ズームレベルでは、基準オブジェクトによってキャプチャされる画素の数は1,000画素であり得る。5倍のズームレベルでは、ピクセル数は5,000まで増加し得る。1:5マッピングとして説明されているが、ピクセルの数は、カメラタイプ、レンズタイプ、温度、焦点合わせ中のレンズ移動距離の誤差などに基づいて変化し得ることを理解されたい。GCAMS1~3(1122、1124、1126)およびTCAMS1~3(1114、1116、1118)を較正するために、必要に応じて、または光学画像のキャプチャおよび距離精度を高めるために、様々な他の技術を展開することもできる。 In other forms, each of the cameras can be calibrated based on optical or digital zoom levels. For example, if GCAM1 1122 includes 10x optical zoom capability, GCAM1 1122 may be set to a series of zoom levels (eg, 1X, 2X, 5X, 10X, etc.) and calibrated using a reference object. In this way, the overall size of the reference object can be stored within each camera or RMS 1134 and used to calculate distance. In another form, it is possible to determine the number of pixels present at the zoom level of the reference object, and when the zoom level of the camera changes, the number of pixels changes for each zoom level, determining the distance of the object. can be memorized and used later. For example, at a 1x zoom level, the number of pixels captured by the reference object may be 1,000 pixels. At a 5x zoom level, the number of pixels can increase to 5,000. Although described as a 1:5 mapping, it should be understood that the number of pixels may vary based on camera type, lens type, temperature, error in lens travel distance during focusing, etc. Various other techniques as needed to calibrate GCAMS 1-3 (1122, 1124, 1126) and TCAMS 1-3 (1114, 1116, 1118) or to enhance optical image capture and distance accuracy can also be expanded.
別の態様によれば、MAIGホール1100はまた、ティーボックスレーダユニット1120および第2のレーダユニット1132を含む。各レーダユニットは、各レーダユニットによって検出されたレーダデータを記憶するためにRMS1134に結合することができる。場合によっては、各レーダユニットは、キャプチャされたデータを記憶し、RMS1134がデータの送信を要求したときにキャプチャされたデータを通信することができる。レーダデータは、MAIGホール1100のキャプチャされたビデオと同期することができるタイムスタンプされたデータを含むことができる。一形態によれば、各レーダを使用して、新たな毎日のピン位置、およびプレイ中のゴルフボールなどの移動オブジェクトの統計またはデータを見つけることができる。さらに、レーダデータをAIゴルフロジック1148と組み合わせて、ゴルフオブジェクトおよびMAIGホール1100上に存在または位置するオブジェクトの位置/速度を識別することができる。 According to another aspect, MAIG hall 1100 also includes a tee box radar unit 1120 and a second radar unit 1132. Each radar unit may be coupled to RMS 1134 for storing radar data detected by each radar unit. In some cases, each radar unit can store captured data and communicate the captured data when RMS 1134 requests transmission of the data. The radar data may include time-stamped data that may be synchronized with captured video of the MAIG hall 1100. According to one form, each radar can be used to find new daily pin locations and statistics or data for moving objects, such as golf balls in play. Further, radar data can be combined with AI golf logic 1148 to identify the position/velocity of golf objects and objects present or located on MAIG hole 1100.
別の態様によれば、MAIGホール1100は、複数の視点または角度から複数のプレーヤショットを録画することができる。例えば、TCAM1~3(1114、1116、1118)を使用して、最初にティーオフするゴルファーの出射ボールフライトを録画することができる。さらに、ボールが飛行している間、1つまたは複数のグリーンサイドカメラGCAM1~3(1122、1124、1126)はボールの飛行を録画することができ、一方、別のグリーンサイドカメラは、ボールがグリーン1106に接近して着地するときにボールを録画することができる。このようにして、多視点ビデオを作成することができ、ショットの複数のセグメントを提示し、ユーザの最終ビデオに結合することができる。例えば、各ビデオは、特定のゴルファーのために作成され、処理のためにNMS1140に通信することができる。各ビデオは、ゴルファーのためのビデオセグメントの録画中に作成された固有のセッションIDを有することができ、NMS1140は、ビデオをショットの単一のビデオに結合することができる。他の形態では、MAIG1100を使用して、ゴルファーによるティーショットの分割画面ビューを作成することもできる。例えば、右利きのゴルファーがティーオフしている場合、TCAM1 1114はティーボックス1102の後ろまたはライン上から録画することができ、TCAM2 1116はゴルファーのショットのフロントビューを録画するために使用することができる。ビデオの各々は、NMS1140によって同期され、最終ビデオに処理されると、最終ビデオの一方の側に全体ビデオが提示され、他方の側にフロントビュービデオが提示されるように提示されることができる。このようにして、ゴルファーは単一のビデオで両方のビューを受信する。 According to another aspect, MAIG hall 1100 can record multiple player shots from multiple viewpoints or angles. For example, TCAMs 1-3 (1114, 1116, 1118) can be used to record the exit ball flight of a golfer teeing off for the first time. Additionally, while the ball is in flight, one or more greenside cameras GCAM1-3 (1122, 1124, 1126) can record the flight of the ball, while another greenside camera The ball may be recorded as it approaches and lands on the green 1106. In this way, multi-view videos can be created, where multiple segments of a shot can be presented and combined into the user's final video. For example, each video can be created for a particular golfer and communicated to NMS 1140 for processing. Each video may have a unique session ID created during the recording of the video segment for the golfer, and the NMS 1140 may combine the videos into a single video of the shot. In other forms, MAIG 1100 may also be used to create a split-screen view of a tee shot by a golfer. For example, if a right-handed golfer is teeing off, TCAM1 1114 can record from behind the tee box 1102 or on the line, and TCAM2 1116 can be used to record the front view of the golfer's shot. Can be done. Each of the videos, once synchronized and processed into a final video by the NMS 1140, can be presented such that the entire video is presented on one side of the final video and the front view video is presented on the other side. . In this way, the golfer receives both views in a single video.
別の態様によれば、MAIGホール1100は、MAIGホール1100を一緒にプレイしている複数のゴルファーのプレイを追跡するために単一のカメラを使用することができる。例えば、4人のゴルファーが2組でゴルフのラウンドを行う際に、MAIGホール1100に近づくことがあり得る。各ゴルファーは、QRゴルフコード1146をスキャンしてセッションを作成し、自分の番であるときにティーボックス1102から自分のショットを撮ることができる。最初のゴルファーがティーアウトすると、TCAM1~3(1114、1116、1118)のうちの1つおよびAIロジック1148を使用するRMS1136は、QRゴルフコード1146をスキャンしたゴルファーを識別する。QRゴルフコード1146をスキャンすると、特定のゴルファーの画像データがキャプチャされ、その後の使用および処理のために保存され得る。各ゴルファーがQRゴルフコード1146をスキャンした後、一意のセッションIDが作成され、各ゴルファーの固有の態様がRMS1136およびAIロジック1148で検出される。各ゴルファーが最初のショットを打ち、ボールに接近した後、RMS1136は各ゴルファーの残りのショットを録画するためにカメラを割り当てることができる。例えば、ゴルファー#1はグリーン1106の裏にショットしていてもよい。したがって、GCAM1 1122は、ゴルファー#1を録画するために割り当てることができる。さらに、ゴルファー#2がグリーン1106の右にゴルフボールを打った場合、ゴルファー#2を録画するためにGCAM2 1124を割り当てることができる。さらなる態様によれば、ゴルファー#3がグリーン1106の前にボールを着地させた場合、ティーボックスカメラを使用してゴルファー#3を録画することができる。例えば、TCAM2 1116は、本明細書で説明するようにPTZカメラとして提供することができ、ゴルファー#3に向かって回転させ、それに応じて残りのプレイを録画することができる。このようにして、複数のプレーヤは、「パーソナルカメラ」を使用して自分のショットを録画することができ、MAIGホール1100は、ビデオストリーム全体を別々のセグメントにスライスする必要なく、各ゴルファーを単一のビデオセッション上に録画することができる。 According to another aspect, MAIG hole 1100 may use a single camera to track the play of multiple golfers playing MAIG hole 1100 together. For example, two sets of four golfers may approach the MAIG hole 1100 when playing a round of golf. Each golfer can scan the QR golf code 1146 to create a session and take their own shot from the tee box 1102 when it is their turn. When the first golfer tees out, the RMS 1136 using one of TCAMs 1-3 (1114, 1116, 1118) and AI logic 1148 identifies the golfer who scanned the QR golf code 1146. Upon scanning the QR golf code 1146, image data for a particular golfer may be captured and stored for subsequent use and processing. After each golfer scans the QR golf code 1146, a unique session ID is created and each golfer's unique aspects are detected at the RMS 1136 and AI logic 1148. After each golfer hits the first shot and approaches the ball, the RMS 1136 can assign a camera to record each golfer's remaining shots. For example, golfer #1 may be hitting the back of the green 1106. Therefore, GCAM1 1122 can be assigned to record golfer #1. Additionally, if Golfer #2 hits a golf ball to the right of the green 1106, GCAM2 1124 can be assigned to record Golfer #2. According to a further aspect, if golfer #3 lands the ball in front of the green 1106, the tee box camera may be used to record golfer #3. For example, TCAM2 1116 can be provided as a PTZ camera, as described herein, and can be rotated toward golfer #3 and record the rest of the play accordingly. In this way, multiple players can record their own shots using a "personal camera," and the M AIG Hole 1100 can record each golfer's shots without having to slice the entire video stream into separate segments. Can be recorded on a single video session.
さらなる態様によれば、NMS1140をRMS1136とともに使用して、グループでプレイする各ゴルファーのビデオを作成することができる。例えば、ゴルファーが彼らのモバイルデバイス1144を使用してQRゴルフコード1146をスキャンすると、セッションがNMS1140によって要求されて、RMS1136がそのゴルファーの録画イベントを開始することを可能にすることができる。ゴルファーのIDおよびAI検出データは、その特定のゴルファーのビデオを処理するためにRMS1136および/またはNMS1140によって記憶することができる。さらに、ゴルフボールの検出された着地位置に基づいてそのゴルファーにカメラを割り当てることもでき、そのセッションのユーザのログファイルに記憶することができる。次のゴルファーが打つと、QRゴルフコード1146をスキャンする各ゴルファーについて新しいセッションが作成され、作成された各ビデオに関連付けられた一意の識別子が取得される。各ゴルファーがスキャンまたはチェックインすると、WAIGホール1100は各ゴルファーを録画し、各ビデオの後処理のために各ゴルファーのビデオをRMS1136からNMS1140に通信する。例えば、識別された各ゴルファーのログファイルは、各ビデオと通信することができ、レーダユニットデータ、ビデオ、ゴルファー名、ホールの距離、ショットの距離、またはプレイの他の様々な態様を含むショットの様々な態様を含むことができる。次いで、NMS1140は、生成された一意のIDを使用してビデオの各々を処理することができ、ゴルファーの名前、コース名、ホール番号および距離、完了するストローク数、ドライブまたはショットの長さ、ピンまでの距離、および様々な他の形態のホールデータなどのパフォーマンスデータにグラフィックデータをオーバーレイすることができる。NMS1140はまた、各ゴルファーの視聴体験をさらに向上させるために、各ティーボックスショットにショットトレースを追加することができる。したがって、単一のビデオストリームは、各ゴルファーに割り当てられた単一のカメラによって作成され、各ゴルファーがWAIGホール1100でのプレイを終了するとRMS1136/1140によって処理されることができる。これにより、各ゴルファーが別々の時間にホールを終了することを考慮すると、制作効率を向上させることができ、アップロード時間およびビデオ処理要件が低減され、WAIGホール1100をサポートするAIMS全体の負担が少なくなる。 According to a further aspect, NMS 1140 can be used in conjunction with RMS 1136 to create a video of each golfer playing in a group. For example, when a golfer scans a QR golf code 1146 using their mobile device 1144 , a session may be requested by NMS 1140 to allow RMS 1136 to initiate a recording event for that golfer. Golfer ID and AI detection data may be stored by RMS 1136 and/or NMS 1140 for processing that particular golfer's video. Additionally, a camera may be assigned to the golfer based on the detected landing position of the golf ball and may be stored in the user's log file for that session. When the next golfer hits, a new session is created for each golfer who scans the QR golf code 1146 and a unique identifier associated with each video created is obtained. As each golfer scans or checks in, WAIG Hall 1100 records each golfer and communicates each golfer's video from RMS 1136 to NMS 1140 for post-processing of each video. For example, a log file for each identified golfer can be communicated with each video, radar unit data of the shot, including the video, golfer name, hole distance, shot distance, or various other aspects of play. Various aspects can be included. The NMS 1140 can then process each of the videos using the unique ID generated, including the golfer's name, course name, hole number and distance, number of strokes completed, drive or shot length, pin Graphical data can be overlaid on performance data such as distance to distance, and various other forms of hole data. NMS 1140 can also add shot traces to each tee box shot to further enhance each golfer's viewing experience. Thus, a single video stream can be created by a single camera assigned to each golfer and processed by the RMS 1136/1140 as each golfer finishes playing at the WAIG hole 1100. This can improve production efficiency considering each golfer completes the hole at a different time, reduces upload time and video processing requirements, and puts less strain on the overall AIMS supporting WAIG Hole 1100. Become.
次に図12を参照すると、本開示の一態様によるゴルフ競技会モバイルアプリケーションのグラフィカルユーザインタフェースが開示されている。概して1200で示されているユーザインタフェースは、全体的にまたは部分的に、図5A~図5Dに一般的に示されているようなモバイルアプリケーションとともに使用することができる。ユーザインタフェース1200は、競技会ゴルフコース地図ビュー1202、ゴルフコースリストビュー1212、ゴルフコース記述1224、ゴルフホールビュー1234、およびゴルフホール競技会予約ビュー1240を含むことができる。 Referring now to FIG. 12, a graphical user interface for a golf tournament mobile application is disclosed in accordance with one aspect of the present disclosure. The user interface, shown generally at 1200, can be used, in whole or in part, with mobile applications such as those shown generally in FIGS. 5A-5D. User interface 1200 may include a competition golf course map view 1202, a golf course list view 1212, a golf course description 1224, a golf hole view 1234, and a golf hole competition reservation view 1240.
一態様によれば、競技会ゴルフコース地図ビュー1202は、コース案内タブセレクタ1204、賞金セレクタ1206、概して1208で示される賞金アイコン、およびモバイルアプリユーザの現在位置アイコン1210を含む。ゴルフコース地図ビュー1202は、ユーザが競技ゴルフ競技会をどこで行うことができるかの視覚的表示を提供する。賞金アイコン1208の各々は、ユーザが最高賞金の競技会がどこに位置し得るかの視覚的表示を有することを可能にするために、コースごとに各アイコンの一部として統合された賞金ドル額を含む。各賞金アイコンは、以下のように更新することができる。ゴルフコース地図ビュー1202はまた、利用可能な競技会の有無にかかわらずコースを表示するための賞金セレクタ1206を含む。ユーザが賞金セレクタ1206を検出すると、図5Aのコース532の地図530などのユーザインタフェースを表示することができる。 According to one aspect, the competition golf course map view 1202 includes a course guide tab selector 1204, a prize selector 1206, a prize icon indicated generally at 1208, and a mobile app user current location icon 1210. Golf course map view 1202 provides a visual indication of where a user can conduct competitive golf competitions. Each of the prize icons 1208 has a prize dollar amount integrated as part of each icon for each course to allow the user to have a visual indication of where the highest prize competition may be located. include. Each prize icon can be updated as follows. Golf course map view 1202 also includes a prize selector 1206 for displaying courses with and without competitions available. When a user detects prize selector 1206, a user interface, such as map 530 of course 532 in FIG. 5A, may be displayed.
一態様によれば、ユーザはまた、リストビュータブ1214を選択することができ、ゴルフコースリストビュー1212を表示することができる。ゴルフコースリストビュー1212は、1218で概して示されているゴルフコースのリストを表示するために使用することができるセレクタ1216によるソートを含むことができる。リスト1218内には、セレクタ1216によってソートおよび表示されるゴルフコース1220を含むことができ、リスト1218内のコースの各々で行われている競技会のための特定の賞金値を有する1つまたは複数の賞金額1220を含むことができる。リスト1218はまた、ゴルフ競技会を行っていない可能性があるが、依然として本明細書に記載のメディア録画サービスを提供することができるコースを表示することができる。一態様によれば、セレクタ1216によるソートは、ユーザがゴルフコースまでの距離によっておよび他の形態でソートすることを可能にすることができ、最高から最低までの賞金、競技会タイプ、プライベートまたはパブリックな競技会、チャリティ競技会、または競技ゴルフモバイルアプリのユーザが利用可能であり得る他の形態の競技会によってソートすることができる。一形態では、リスト1218は、サウスカロライナ州などの特定の地域に限定される必要はないが、米国、カナダ、アイルランドなどの地域全体にわたって賞金を表示することができる。ユーザインタフェース1200はまた、発生し得る競技会の種類に基づいてユーザがフィルタリングすることを可能にするフィルタ機能を含むことができる。例えば、ユーザは、ホールインワン競技会をプレイすることのみを望む場合があり、ソート1216およびゲームごとのフィルタ、ホールインワン(明示的には図示せず)、ゲームごとの特定の賞金のリスト1212または地図1202のビューを表示することができる。 According to one aspect, the user may also select list view tab 1214 to display golf course list view 1212. Golf course list view 1212 can include sorting by selector 1216 that can be used to display a list of golf courses, shown generally at 1218. List 1218 may include golf courses 1220 sorted and displayed by selector 1216, with one or more golf courses 1220 having a particular prize value for the competition being played at each of the courses in list 1218. The winning amount 1220 may be included. Listing 1218 may also display courses that may not be hosting golf competitions, but can still provide media recording services as described herein. According to one aspect, sorting by selector 1216 may allow the user to sort by distance to the golf course and in other forms, including prize money from highest to lowest, competition type, private or public. You can sort by competitions, charity competitions, or other forms of competitions that may be available to users of the Competitive Golf Mobile App. In one form, the list 1218 need not be limited to a particular region, such as South Carolina, but may display prizes across regions such as the United States, Canada, and Ireland. User interface 1200 may also include a filter feature that allows the user to filter based on the types of competitions that may occur. For example, a user may only wish to play hole-in-one competitions, sort 1216 and filter by game, hole-in-ones (not explicitly shown), list 1212 of specific prizes by game, or map 1202 view can be displayed.
一態様によれば、ユーザがアイコン1208またはコース1220を使用してコースを選択すると、ゴルフコース記述1224を表示することができ、ゴルフコース名および位置1226、競技会を有するゴルフホールのホール記述1228、ティータイムおよびウェブサイトリンク1230、ならびにホールでプレイされているゲームの賞金額1232および記述を含む。いくつかの形態では、ユーザは、ゴルフコース記述1224をナビゲートして、競技会および賞金額1232を有するゴルフホールのレイアウト1236を見ることができる。ユーザが賞金額1232を選択すると、ゴルフホール競技会予約ビュー1240をユーザに表示して、ユーザが特定の競技会および購入費用でプレイすることを可能にすることができる。例えば、ゴルフホール競技会予約ビュー1240は、競技会の賞金額1242、ゴルフコース名およびホール番号1244、現在の購入額1246、ならびに競技会のホールおよびティー記述1248を含むことができる。ティー免責条項1250が、ホールおよびティー記述1248の下に設けられる。ユーザが「購入」1252を使用して競技会でプレイするために購入する前に、ユーザは、条項チェックマーク1254を使用して条項1256に同意しなければならない。例えば、条項は、ゲームをプレイするのに十分な年齢の人であること、プレーヤはプロゴルファーではないこと、およびプレーヤは賞金のために税金を支払うことに同意することを含むことができる。別の形態では、プレイ中の競技会の位置に基づいて、条項を地域的に境界付けることもできる。例えば、ホールインワン競技会は、フロリダ州では合法であり得るが、サウスカロライナ州では違法であり得る。したがって、条項は、ユーザが購入している可能性のある地域および競技会の種類に基づく条項のみを可能にするように修正することができる。様々な法律の州ごとの性質により、地域ベースの条項を使用するモバイルアプリケーションは、以下でさらに詳細に説明するように、ユーザの位置に基づいて条項のリアルタイム更新を可能にする、ユーザによってアクセスされ、クラウドサービス内で更新され得るゴルフ競技会の条項を提示するための有利な方法をモバイルアプリプロバイダに提供する。ユーザが条項チェックマーク1254を確認すると、購入アイコン1252を用いて入場料を支払うことができる。支払いは、Apple Pay、Venmo、または他のモバイル支払いなどの支払いサービスを使用して設定され得るモバイル支払いサービスの形態であり得る。別の形態では、支払いは、図5Aのアカウント情報522などのユーザプロファイルを使用して設定することができ、ユーザはクレジットカード情報(明示的には図示せず)を入力することができ、購入のための支払いは、モバイルアプリ内で自動化することができる。 According to one aspect, when a user selects a course using icon 1208 or course 1220, a golf course description 1224 may be displayed, including golf course name and location 1226, hole description 1228 of the golf hole with competition , tee times and website links 1230, and winning amounts 1232 and descriptions of the games being played in the hole. In some forms, the user can navigate through the golf course description 1224 to view a layout 1236 of golf holes with competitions and prize amounts 1232. Once the user selects the prize amount 1232, a golf hole competition reservation view 1240 may be displayed to the user to allow the user to play with the particular competition and purchase cost. For example, golf hole competition reservation view 1240 may include competition prize amount 1242, golf course name and hole number 1244, current purchase amount 1246, and competition hole and tee descriptions 1248. A tee disclaimer 1250 is provided below the hole and tee description 1248. Before the user can use "Purchase" 1252 to make a purchase to play in a competition, the user must agree to terms 1256 using terms check mark 1254. For example, the terms may include that the person is old enough to play the game, that the player is not a professional golfer, and that the player agrees to pay taxes on the winnings. In another form, the provisions may be regionally bounded based on the location of the competition being played. For example, a hole-in-one competition may be legal in Florida but illegal in South Carolina. Therefore, the terms can be modified to only allow terms based on the region and type of competition that the user may be purchasing. Due to the state-by-state nature of various laws, mobile applications that use region-based provisions may be accessed by users, allowing for real-time updates of provisions based on the user's location, as explained in further detail below. , provides mobile app providers with an advantageous way to present the terms of a golf competition that can be updated within a cloud service. Once the user confirms the clause check mark 1254, the purchase icon 1252 may be used to pay for admission. Payments may be in the form of mobile payment services that may be set up using payment services such as Apple Pay, Venmo, or other mobile payments. In another form, payment can be set up using a user profile, such as account information 522 in FIG. 5A, where the user can enter credit card information (not explicitly shown) and purchase Payments for can be automated within the mobile app.
別の態様によれば、ユーザがQRコード(登録商標)をスキャンしてチェックインしてホールをプレイすると、ゴルファーがショットを打つ前に競争するオプションを与えるために賞金額1242を表示することができる。例えば、ユーザが図5BのQRコード(登録商標)548などのQRスキャンを使用してゴルフコードをスキャンすると、ユーザインタフェース1240をユーザに表示して、ユーザが毎日の競技会に参加できるようにすることができる。したがって、ユーザは、購入したホールを実際にプレイして競技会でプレイするまで待つことができ、QRコード(登録商標)および位置検出を使用して、どのホールがプレイされているか、競技会のための購入、ならびにプレイされているホールに固有の条項を判定することができる。 According to another aspect, when a user scans a QR code to check in and play a hole, the prize amount 1242 may be displayed to give the golfer the option to compete before hitting the shot. can. For example, when a user scans a golf code using a QR scan, such as QR code 548 in FIG. 5B, a user interface 1240 is displayed to the user to allow the user to participate in daily competitions. be able to. Users can therefore wait until they actually play the holes they have purchased in a competition, and use QR codes and location detection to find out which holes are being played, purchases, as well as terms specific to the hole being played.
図13は、本開示の一態様によるモバイルアプリケーション内で自律型ゴルフ競技会を提供する方法のブロック図を示す。本方法は、図12に示すユーザインタフェース1200などのユーザインタフェース、または他のユーザインタフェースを出力するために使用することができ、ユーザインタフェースは、携帯電話、タブレット、スマートウォッチ、ゴルフカート、プルカート、プッシュカート、動力「追従」カート、ラップトップコンピュータ、または任意の他のモバイルデバイス上で全体的または部分的に使用することができるアプリケーション内に提供することができる。ユーザインタフェース1200および図13の方法を有するモバイルアプリケーションはまた、従来のコンピュータ、インターネットブラウザなどの他のデバイス上にインストール/具現化/アクセス可能であってもよいことが理解されよう。 FIG. 13 illustrates a block diagram of a method for providing autonomous golf competitions within a mobile application according to one aspect of the present disclosure. The method can be used to output a user interface, such as user interface 1200 shown in FIG. 12, or any other user interface, such as a mobile phone, tablet, smart watch, golf cart, pull cart, push It can be provided within an application that can be used in whole or in part on a cart, a powered "follower" cart, a laptop computer, or any other mobile device. It will be appreciated that a mobile application having the user interface 1200 and the method of FIG. 13 may also be installed/implemented/accessible on other devices such as conventional computers, Internet browsers, and the like.
本方法は一般にステップ1300で開始し、本方法は、モバイルアプリケーション内にUIおよびバックグラウンド処理を表示するように進む。一連の決定木は、図13の方法を開始すると起動することができ、モバイルアプリケーション内で実行されるユーザインタフェースまたはプロセス内の選択によって起動することができる。各決定木は、起動に応答して説明されるが、図13内に提示された順序で展開される必要はなく、複数の異なる順序で展開され得る。さらに、丸付きの「A」は、図示された決定木シーケンス内の位置「から」および位置「へ」ループする位置を示す。必要または所望に応じて、他のループも使用することができる。 The method generally begins at step 1300, and the method proceeds to display a UI and background processing within the mobile application. The series of decision trees can be activated upon initiating the method of FIG. 13, and can be activated by selection within a user interface or process executed within the mobile application. Although each decision tree is described in response to activation, it need not be expanded in the order presented in FIG. 13 and may be expanded in multiple different orders. Additionally, the circled "A" indicates the position of looping "from" and "to" the illustrated decision tree sequence. Other loops can also be used as needed or desired.
一態様によれば、判断ステップ1302において、地図ビューが選択された場合、方法はブロック1312に進み、AI対応ゴルフコースが位置する場所を含むユーザインタフェース内に地図を表示する。例えば、本方法は、ユーザの現在位置を判定し、特定のGPS座標を有するゴルフコースのリストを記憶するデータベースにアクセスすることができる。ステップ1312の間、方法は、どのゴルフコースが特定の距離(例えば、5マイル、10マイル、50マイルなど)内にあるかを判定し、地図上のアイコンを使用してコースを表示することができる。次いで、方法は、判断ステップ1314に進み、表示されているゴルフコースのいずれかが利用可能な競技会を有するかどうかを判定することができる。競技会は、参加者への金銭的賞金を伴う様々なスキルベースのゴルフ競技会を含むことができ、限定はしないが、ニアピン(C2P)、ホールインワン(HIO)、最長ドライブ、ファーストバーディ、ファーストイーグル、もしくはコース上の競技会を含むプレイ可能な他のゲーム、またはそれらの任意の組合せを含むことができる。さらに、ゴルフコースはまた、異なるゴルフホールでの複数の競技会を含むことができる。 According to one aspect, if a map view is selected at decision step 1302, the method proceeds to block 1312 and displays a map within the user interface that includes a location where the AI-enabled golf course is located. For example, the method can determine the user's current location and access a database that stores a list of golf courses with particular GPS coordinates. During step 1312, the method may determine which golf courses are within a particular distance (e.g., 5 miles, 10 miles, 50 miles, etc.) and display the courses using icons on the map. can. The method may then proceed to decision step 1314 and determine whether any of the displayed golf courses have competitions available. Competitions can include various skill-based golf competitions with monetary prizes for participants, including, but not limited to, near pin (C2P), hole-in-one (HIO), longest drive, first birdie, first eagle. , or other playable games including on-course competitions, or any combination thereof. Additionally, a golf course may also include multiple competitions at different golf holes.
競技会が利用可能でない場合、地図はAI対応機能のみを有するコースで表示される。競技会が利用可能である場合、方法はステップ1316に進み、ユーザが競技会の賞金付きのゴルフコースのみを見ることを可能にする「賞金のみ」セレクタを表示する。これにより、ユーザは利用可能な競技会を迅速に見ることができる。ユーザが競技会を見たくない場合、本方法は、AI対応コースを有する地図を表示することに進む。判断ステップ1318において、ユーザが賞金セレクタを選択した場合、方法はステップ1320に進み、賞金付きコースを識別し、次いでステップ1322に進み、賞金額を識別する。例えば、HIO競技会は、C2P競技会よりも高い賞金を有する可能性があり、それに応じて表示することができる。さらに、各賞金は、前日に勝者がいないこと、またはコースもしくはサービスプロバイダがより高い賞金を資金提供することを選択したことに基づいて毎日変更することができる。賞金を決定すると、方法はステップ1324に進み、コースが位置する地図上に位置するアイコン内に賞金額を表示する。このようにして、ユーザは、ユーザが位置し得る場所に対して単一のユーザインタフェース内の賞金付きコースの迅速なビューを得ることができる。図12のユーザインタフェース1202は、ゴルフコースでの賞金を伴う地図ビューを例示する。 If a competition is not available, the map will be displayed with courses that only have AI-enabled features. If a competition is available, the method proceeds to step 1316 and displays a "Prizes Only" selector that allows the user to view only golf courses with prizes in the competition. This allows the user to quickly view available competitions. If the user does not want to watch the competition, the method proceeds with displaying a map with AI-enabled courses. If the user selects the prize selector at decision step 1318, the method proceeds to step 1320 to identify a course with a prize and then to step 1322 to identify a prize amount. For example, HIO competitions may have higher prize money than C2P competitions and may be displayed accordingly. Additionally, each prize can change daily based on no winners the previous day or the course or service provider elects to fund a higher prize. Once the prize is determined, the method proceeds to step 1324 and displays the prize amount in an icon located on the map where the course is located. In this way, the user can get a quick view of the prize-winning course within a single user interface to where the user may be located. User interface 1202 of FIG. 12 illustrates a map view with prizes on a golf course.
判断ステップ1304において、リストビューを作成してユーザインタフェース内に提示することができ、ステップ1326に進み、ユーザまたはモバイルデバイスが位置し得る地域位置を判定することができる。上述したように、地域はユーザの行動半径内にあることができるが、より大きな位置または国に基づいて提示することもできる。例えば、地域は、テキサス州、アイルランド、カナダ、または他の地域とすることができる。地域を識別すると、方法はステップ1328に進み、その地域内のコースを識別する。例えば、コースは、AI対応コースと競技会を有するAI対応コースの両方を含むことができる。他の形態では、AI対応技術を有していないコースのリストを、ユーザが必要または所望に応じてティータイムを知り、選択し、予約するために提供することもできる。領域内のAI対応コースを決定すると、方法はステップ1330に進み、ユーザの位置から最も近いコースから最も遠いコースまでを示すリストを作成する。図12のユーザインタフェース1212は、リストビューの一例を示す。次いで、方法は判断ステップ1332に進み、新しいソートが選択され得るかどうかを検出する。例えば、ユーザは、競技会の最高もしくは最低の賞金、最高もしくは最低の価格の購入、ユーザに最も近いまたは最も遠い位置、または必要もしくは所望に応じて他の種類を示すためにリストをソートしたい場合がある。ソートが選択された場合、方法はステップ1334に進み、コースのリストをソートし、判断ステップ1336に進み、そこで方法は、ユーザがリストをフィルタリングしたいかどうかを判定する。ソートが選択されていない場合、ユーザはコースをフィルタリングするだけでよく、判断ステップ1336において、ユーザはフィルタを選択してリストを表示することができる。例えば、ユーザは、競技会を表示しないことを選択することができ、競技会なしでコースを表示したいだけである。他の形態では、ユーザは、限定はしないが、必要または所望に応じて作成することができる様々な他のソート変数のうち、賞金レベル、競技会タイプ、ホール難易度、平均HIO達成数、今年のHIO数、距離、支払う価格、利用可能なティータイム、1日の料金、ピンまでの平均距離、を含む様々な要因に基づいてフィルタリングすることができる。フィルタを作成すると、方法はステップ1338に進み、選択されたフィルタに基づいてリストを表示することができる。したがって、特定のタイプのゴルフコースおよび体験提供の効率的な表示は、ユーザインタフェース内でアクセス、フィルタリング、およびユーザに表示することができる。
At decision step 1304, a list view may be created and presented within the user interface, and proceeding to step 1326, a geographic location in which the user or mobile device may be located may be determined. As mentioned above, regions can be within the user's radius, but can also be presented based on larger locations or countries. For example, the region may be Texas, Ireland, Canada, or other region. Once the region is identified, the method proceeds to step 1328 and identifies courses within the region. For example, a course may include both an AI-enabled course and an AI-enabled course with a competition. In other forms, a list of courses that do not have AI-enabled technology may be provided for the user to learn about, select, and reserve tee times as needed or desired. Once the AI-enabled courses within the region are determined, the method proceeds to step 1330 and creates a list showing the courses from the closest to the farthest from the user's location. User interface 1212 in FIG. 12 shows an example of a list view. The method then proceeds to decision step 1332 to detect whether a new sort can be selected. For example, if the user wants to sort the list to show the highest or lowest winnings of a competition, the highest or lowest priced purchases, the location closest or farthest to the user, or any other type as needed or desired. There is. If sorting is selected, the method proceeds to step 1334 to sort the list of courses and proceeds to
判断ステップ1306において、コースが選択されると、方法はステップ1340に進み、選択されたコースのコース情報を取得し、判断ステップ1342に進み、競技会が利用可能であるかどうかを検出する。例えば、選択されたコースが競技会を有する場合、本方法は、競技会を記述する情報のデータベースにアクセスし、ステップ1344に進んでどのホールが競技会を有するかを決定し、次いでステップ1346に進んで競技会のタイプを決定することができる。次いで、方法は、ステップ1348に進み、競技会の賞金を決定し、ステップ1350に進んで、競技会をプレイするために購入費用を決定することができる。選択されたコースの競技会情報を決定すると、本方法は、ステップ1352に進み、決定された競技会情報をユーザインタフェース内でユーザに表示することができる。図12のユーザインタフェース1224は、ステップ1352で提供されるユーザインタフェースの例を示す。 Once a course is selected in decision step 1306, the method proceeds to step 1340 to obtain course information for the selected course and proceeds to decision step 1342 to detect whether a competition is available. For example, if the selected course has a competition, the method accesses a database of information describing the competition, proceeds to step 1344 to determine which holes have a competition, and then proceeds to step 1346. You can proceed and decide on the type of competition. The method may then proceed to step 1348 to determine the prize money for the competition, and proceed to step 1350 to determine the purchase cost to play the competition. Upon determining the competition information for the selected course, the method may proceed to step 1352 and display the determined competition information to the user within the user interface. User interface 1224 of FIG. 12 illustrates an example of the user interface provided in step 1352.
判断ステップ1308において、プレイがユーザによって選択された場合、方法はステップ1354に進み、選択されたゲームの競技会情報を表示する。次いで、方法はステップ1356に進み、ユーザが選択したコースおよび競技会の位置を検出する。例えば、ユーザが競技会を有するノースカロライナ州のコースを選択した場合、州法は、プレイすることができるゲームの種類を制限している可能性があり、コースおよび競技会の条項は、位置に基づいて更新することができる。同様に、フロリダ州でコースおよびゲームが選択された場合、あるコースでフロリダ州の競技会を行うための条項は、ノースカロライナ州とは異なる場合がある。したがって、本方法は、競技会の位置を決定し、ステップ1358に進み、プレイされる競技会の位置に基づいて条項を更新することができる。次いで、本方法は、ステップ1360に進み、ユーザインタフェース内にチェックボックスを表示して、ユーザが条項に同意することを可能にし、ユーザが位置ベースの条項を閲覧するためのリンクを表示することができる。ステップ1362において、ユーザがチェックボックスに同意または選択しない場合、本方法は、競技会情報の表示に進む。ユーザが判断ステップ1362で条項に同意することを選択すると、本方法はステップ1364に進み、ユーザインタフェース内の購入アイコンを有効にして、ユーザが選択された競技会またはゲームに対して支払うことを可能にすることができる。「購入」または「購入する」アイコンは、ユーザが条件内の条件に同意したときに有効になるが、他の形態では、条項がユーザインタフェースの他の位置で提供される場合に「購入」アイコンをアクティブにすることができる。図12のユーザインタフェース1244は、作成され得るユーザインタフェースを例示する。 If play is selected by the user at decision step 1308, the method proceeds to step 1354 and displays competition information for the selected game. The method then proceeds to step 1356 and detects the user selected course and competition location. For example, if a user selects a course in North Carolina that has competition, state law may limit the types of games that can be played, and the terms of the course and competition may vary based on location. Can be updated. Similarly, if courses and games are selected in Florida, the provisions for conducting competition in Florida at a course may be different than in North Carolina. Accordingly, the method may determine the location of the competition and proceed to step 1358 to update the terms based on the location of the competition being played. The method then proceeds to step 1360 and displays a checkbox in the user interface to allow the user to accept the terms and displays a link for the user to view the location-based terms. can. If the user does not agree to or select the checkbox in step 1362, the method proceeds to display competition information. If the user chooses to agree to the terms at decision step 1362, the method proceeds to step 1364 and enables a purchase icon in the user interface to allow the user to pay for the selected competition or game. It can be done. The "Purchase" or "Purchase" icon is enabled when the user accepts the terms within the terms, but in other forms the "Purchase" icon is enabled when the terms are provided elsewhere in the user interface. can be activated. User interface 1244 in FIG. 12 illustrates a user interface that may be created.
決定ステップ1368において、ユーザが競技会への購入をした場合、方法はステップ1370に進み、支払いを処理する。支払いは、本明細書で説明されるような様々なデジタルまたはモバイル支払い形式であり得る。支払いを処理すると、方法はステップ1372に進み、ユーザがゴルフホールにいるという指示としてQRコード(登録商標)が以前にスキャンされたかどうかを検出することができる。例えば、ユーザは、ゴルフコースに行く前に競技会の前払いを選択することができる。そうである場合、ステップ1372において、本方法はユーザ検証を開始しない。判断ステップ1372において、ユーザがゴルフホールのQRコード(登録商標)を以前にスキャンしていた場合、方法はステップ1374に進み、ユーザは、検証時に選択された競技会において自分のショットを撮ることができ、AI対応カメラを起動してショットを録画することができる。 If the user makes a purchase into the competition at decision step 1368, the method proceeds to step 1370 to process the payment. Payments may be in various digital or mobile payment formats as described herein. Once the payment is processed, the method may proceed to step 1372 and detect whether a QR code was previously scanned as an indication that the user is at a golf hole. For example, a user may choose to prepay for a competition before going to the golf course. If so, in step 1372 the method does not initiate user verification. If, at decision step 1372, the user has previously scanned a golf hole QR code, the method proceeds to step 1374, where the user may take his or her shot in the selected competition at the time of verification. You can activate the AI-enabled camera and record the shot.
判断ステップ1310において、ユーザがゴルフコースに所在し、特定のゴルフホールでQRコード(登録商標)をスキャンする場合、本方法は判断ステップ1376に進み、ユーザが既に競技会に支払いを済ませたかどうかを検出することができる。ユーザがホールでの競技会に以前に支払っている場合、本方法はステップ1374に進み、カウントダウンに進み、ユーザがホールでショットを撮ることを可能にすることができる。図5Bと同様のカウントダウンを表示し、本明細書で説明するように録画された録画ビデオをサポートすることができる。判断ステップ1376において、ユーザがスキャンしたが競技会に支払いを済ませていない場合、本方法はステップ1354に進み、ユーザが競技会においてプレイすることを可能にするか否かを決定することができる。ユーザが競技会でプレイすることを望まない場合、本方法は、上述のようにユーザが自分のショットを録画することを可能にすることに進む。ユーザが競技会でプレイすることを選択した場合、本方法は、ユーザが条件に同意し、ユーザがショットを撮る前に支払いが処理されたことを検出する。したがって、ユーザは、必要または所望に応じて、事前に支払うか、またはホールに到着したときに支払うかを選択することができる。 If the user is located at a golf course and scans a QR code at a particular golf hole in decision step 1310, the method proceeds to decision step 1376 and determines whether the user has already paid for the competition. can be detected. If the user has previously paid for a competition at the hole, the method may proceed to step 1374 and proceed to a countdown to allow the user to take a shot at the hole. A countdown similar to FIG. 5B may be displayed and support recorded video recorded as described herein. At decision step 1376, if the user has scanned but has not paid for the competition, the method may proceed to step 1354 and determine whether to allow the user to play in the competition. If the user does not wish to play in the competition, the method proceeds with allowing the user to record his or her shots as described above. If the user chooses to play in the competition, the method detects that the user agrees to the terms and the payment is processed before the user takes the shot. Thus, the user can choose to pay in advance or upon arrival at the hall, as needed or desired.
次に図14を参照すると、競技会ベースのネットワークメディア処理および管理サービスを示すブロック図が開示されている。競技会ベースのネットワークメディア処理および管理サービス(CNMS)は、概して1400で示され、上記の図4に示されたNMS400の一部または全部を含むことができる。したがって、CNMS1400は、競技会ベースのNMSを説明するために提供され、クラウドストレージおよびサービス1404に接続されたネットワークプロセッサ1402を含むことができ、これは、リモートメディアシステム(RMS)1450またはデジタルメディアを処理および作成するためのビデオを通信するように構成された任意の他のリモートビデオキャプチャシステムまたはデバイスと通信するように構成された通信インタフェース1406に接続されている。CNMS1400はまた、AI対応グラフィック処理エンジン(GPU)1408と、ビデオ/画像プロセッサ1410と、AIロジック1412とを含む。ネットワークプロセッサ1402は、様々なゴルフコースでの1つまたは複数の競技会をサポートするためのデジタルメディアおよびリソースを処理、管理、および通信するために、様々なモジュールまたはマネージャにアクセスすることができる。例えば、CNMS1400は、ゲームマネージャ1414、距離マネージャ1416、位置マネージャ1418を含むことができる。CNMSはまた、競技会マネージャ1420、購入マネージャ1422、ならびに競技会ビデオプロセスおよび結果マネージャ1424を含む。CNMS1400はまた、スコアボードマネージャ1426、勝者検出マネージャ1428、賞金マネージャ1430、条項マネージャ1432、および支払い処理マネージャ1434を含む。CNMS1400はまた、配信マネージャ/通信インタフェース1446を使用して、デジタルメディアとしてRMS1450から受信したビデオをデジタルメディア対応宛先1448に出力することができる。CNMS1400はまた、様々な更新を管理するためのAIロジックマネージャ1440および更新マネージャ1442を含む。
Referring now to FIG. 14, a block diagram illustrating a competition-based network media processing and management service is disclosed. A competition-based network media processing and management service (CNMS) is indicated generally at 1400 and may include some or all of the NMS 400 shown in FIG. 4 above. Accordingly, CNMS 1400 is provided to illustrate a competition-based NMS, and may include a
一態様によれば、ゲームマネージャ1414は、CNMS1400を使用して各ゴルフコースのゲームを管理し、コースごとおよびホールごとに競技会の有効化および無効化を可能にするために使用することができる。例えば、ゲームマネージャ1414は、以下に限られるわけではないが、ホールインワン競技会、ニアピン競技会、最長ドライブ競技会、最低スコア競技会、グループ競技会、一対一競技会、スクランブル競技会、Ryderカップ競技会、またはゴルフのために実現され得る様々な他の種類の競技会、ゲーム、賭け、および/またはギャンブル競技会を含む、特定のゴルフコース上で地域的に提供および使用され得る様々な利用可能なゲームを含むことができる。各ゲームは、特定のゴルフコースにリンクされ、必要に応じて有効化および無効化されるゲームマネージャインターフェース(明示的には図示せず)によって選択することができる。さらに、各ゲームの賞金または価値は、選択されたゲームにリンクすることができ、各ゲームが起動され得る日時を含むことができる。ゲームは、毎日自動的に起動および停止することもできる。 According to one aspect, the game manager 1414 can be used to manage games for each golf course using the CNMS 1400 and allow for enabling and disabling competitions on a per-course and per-hole basis. . For example, the game manager 1414 may include, but is not limited to, hole-in-one competitions, near pin competitions, longest drive competitions, lowest score competitions, group competitions, head-to-head competitions, scramble competitions, Ryder Cup competitions. various other types of competitions, games, betting, and/or gambling competitions that may be implemented for golf, including the various available events that may be offered and used locally on a particular golf course. It can include games. Each game can be selected by a game manager interface (not explicitly shown) that is linked to a particular golf course and enabled and disabled as needed. Additionally, the prize or value for each game can be linked to the selected game and can include the date and time each game may be launched. The game can also be started and stopped automatically every day.
別の態様によれば、ゲームマネージャ1414はまた、CNMS1400を使用してアクセスできるパブリックおよびプライベートなゲームを維持することができる。例えば、パブリックゲームは、特定の場所に展開されているゲームを誰でもプレイできるように提供することができる。しかしながら、他の実施形態では、CNMS1400は、招待のみまたはプライベートアクセスゲームとすることができるプライベートゲームに使用することができる。例えば、コースをプレイしている20人のプレイヤのグループは、CNMS1400によって作成され維持される独自のゲームを望むことができる。したがって、ゲームマネージャ1414は、プライベートゲームを作成し、各招待者に、特定のコースでプレイされるプライベートゲームを起動するためのリンクを提供することができる。以下に説明するように、プライベートゲームはまた、招待者によってのみアクセスされ、プレイされると更新され得るプライベートスコアボードであり得るスコアボードを含むことができる。 According to another aspect, game manager 1414 may also maintain public and private games accessible using CNMS 1400. For example, a public game can be a game developed at a specific location and made available for anyone to play. However, in other embodiments, the CNMS 1400 may be used for private games, which may be invitation-only or private access games. For example, a group of 20 players playing a course may want their own game created and maintained by CNMS 1400. Accordingly, the game manager 1414 can create a private game and provide each invitee with a link to launch the private game to be played on a particular course. As discussed below, a private game may also include a scoreboard, which may be a private scoreboard that may be accessed only by invitees and updated as played.
さらなる態様によれば、ゲームマネージャ1414はまた、プレイ中の各ゲームに使用することができる競技会情報を維持することができる。コース、ゲームタイプ、およびホール情報を提供することに加えて、ゲームマネージャ1414はまた、プレイ中の各ゲームの購入および賞金額を維持することができる。例えば、毎日のニアピン競技会は、10ドルの購入がある週には1日当たり100ドル、20ドルの購入がある週末には1日当たり500ドルに設定することができる。他の形態では、コースは、誰かがホールインワンを達成するまで毎日一定のレベルで増額するホールインワン競技会を有することができる。例えば、ホールインワンは、1000ドルの賞金に対して10ドルのコストがかかり、賞金は、1万ドルに達するまで、またはゴルファーがホールインワンを達成するときまで、1日当たり100ドル増加し得る。さらに、購入は、賞金が増加するにつれて10ドルから20ドルなどのより高いレベルに増加し得る。ゲームマネージャ1414は、特定のレベルに達したときに購入を自動的に増加させることができる。さらに別の形態では、ゲームマネージャ1414は競技会を一定のレベルに設定し、ゴルファーが勝利しなければ、前日にプレイした参加者の数に基づいて賞金を増加させることができる。例えば、ホールインワン競技会がフロリダ州で行われており、5,000ドルの初期レベルに設定されている場合、ホールインワンが達成される前に1,000ショットかかる可能性がある。したがって、100人のゴルファーがプレイのために1日当たり10ドルを支払う場合、ホールインワンが達成されるまで、賞金は15,000ドルの高額にもなり得る。これは、プレーヤの購入に基づいて賞金を自動的に増加させることができる方法の一例であるため、他のレベルも考慮することができる。例えば、ゴルフコースまたはサードパーティのサービスプロバイダは、競技会を提供するためにメンテナンス料を請求することができ、それに応じて賞金を調整することができる。 According to further aspects, game manager 1414 may also maintain competition information that may be used for each game being played. In addition to providing course, game type, and hole information, game manager 1414 may also maintain purchases and winning amounts for each game being played. For example, a daily near pin competition may be set at $100 per day during the week with a $10 purchase and $500 per day on the weekend with a $20 purchase. In other forms, the course may have a hole-in-one competition that increases at a certain level each day until someone achieves a hole-in-one. For example, a hole-in-one costs $10 for a $1000 prize, and the prize can increase by $100 per day until it reaches $10,000, or when a golfer achieves a hole-in-one. Additionally, purchases may increase to higher levels, such as $10 to $20, as the prize increases. Game manager 1414 can automatically increase purchases when certain levels are reached. In yet another form, the game manager 1414 can set the competition to a certain level and, if a golfer does not win, increase the prize money based on the number of participants who played the previous day. For example, if a hole-in-one competition is being held in Florida and is set at an initial level of $5,000, it may take 1,000 shots before a hole-in-one is achieved. Thus, if 100 golfers pay $10 per day to play, the prize money could be as high as $15,000 until a hole-in-one is achieved. Other levels can also be considered, as this is an example of how winnings can be automatically increased based on a player's purchases. For example, a golf course or third party service provider may charge a maintenance fee for providing competitions and may adjust prizes accordingly.
さらなる実施形態では、ゲームマネージャ1414は、ピンまたはカップまでの全体の距離に基づいて変えることができるニアピン(C2P)競技会を維持することができる。従来のC2P競技会では、ピンに最も近づいたプレーヤがその日の競技会に勝つ。しかしながら、他の形態では、ゲームマネージャ1414は、勝者としての資格を得るためにピンまでの最小距離を設定することを可能にすることができる。例えば、1フィート、3フィート、5フィートなどの最小距離をC2P競技会のために設定することができ、それに応じて値を設定することができる。ゲームマネージャ1414はまた、ゴルファーがCNMS1400によって検出された距離内に入るまで、毎日の賞金額の増加を可能にすることができる。このようにして、必要または所望に応じて様々なゲームを作成および修正することができる。 In further embodiments, the game manager 1414 can maintain near pin (C2P) competitions that can vary based on the overall distance to the pin or cup. In traditional C2P competitions, the player closest to the pin wins that day's competition. However, in other forms, the game manager 1414 may allow setting a minimum distance to a pin to qualify as a winner. For example, a minimum distance of 1 foot, 3 feet, 5 feet, etc. can be set for a C2P competition and the values can be set accordingly. The game manager 1414 may also allow for daily prize increases until the golfer comes within the distance detected by the CNMS 1400. In this way, various games can be created and modified as needed or desired.
さらなる態様によれば、CNMS1400はまた、図12のユーザインタフェース1200などのモバイルアプリのユーザインタフェース内にアクティブゲームを提示するための距離マネージャ1416および位置マネージャ1418を含む。位置マネージャ1418は、競技会が行われ得るゴルフコースおよび/またはホールの位置を維持するために使用することができ、距離マネージャ1418は、モバイルデバイスが位置マネージャ1418とともに記憶された競技会および位置を有する1つまたは複数のコースからの距離を検出することができる。CNMS1400はまた、CNMS1400の使用に関するエンドユーザライセンス契約を含む条項および条項マネージャ1432を含む。条項マネージャ1432はまた、ゴルフコースの地域または場所に基づいて各ゴルフコースに基づいて維持および更新される合意のリポジトリを含む。例えば、ホールインワン競技会は、サウスカロライナ州では合法ではないかもしれないが、ネバダ州では合法であり得る。したがって、各州の条項、ならびにCNMS1400およびエンドユーザによって使用され得る利用可能なゲームは、プレイされている地域においてゲームが合法であるかどうかに基づいて修正され得る。このようにして、条項マネージャ1432は、地域ベースの条項合意をCNMS1400のユーザに提供することができる。さらに、購入マネージャ1422は、地域の位置、およびプレーヤが条項に同意したか否かに基づいて有効化および無効化することができる。例えば、購入マネージャ1422を使用して、ユーザがゴルフコースのゲームでプレイするために支払いをしたかどうかを維持し、ユーザがそのコースでゲームでプレイすることを可能にすることができる。購入マネージャ1422は、支払いが開始されることを可能にするために条項マネージャ1432と協働し、様々な処理方法を使用して支払いを処理するために支払い処理マネージャ1434とさらに協働することができる。例えば、ユーザは、Paypal、Venmo、Apple Pay、または様々な他の支払い方法を使用することができる。ユーザは、クレジットカード、デビットカード、キャッシュカードなどを使用して支払うこともできる。支払い処理マネージャ1434とともに購入マネージャ1422は、支払いが有効であるかどうかを判定し、ユーザがホールまたはコースに到着したユーザとの競争会でプレイすることを可能にすることができる。支払いが有効でないか、またはショットを行う前に支払われていない場合、CNMS1400は、キャプチャされたビデオを競技会ビデオとしてマークせず、例えば図4のNMS400を使用してキャプチャされたビデオを処理する。ユーザが競技会の代金を支払った場合、ユーザのビデオは、CNMS1400によって処理される必要がある競技会ビデオとしてマークされる。
According to further aspects, CNMS 1400 also includes a distance manager 1416 and a location manager 1418 for presenting active games within a user interface of a mobile app, such as user interface 1200 of FIG. 12. The location manager 1418 can be used to maintain the locations of golf courses and/or holes where competitions may be played, and the distance manager 1418 allows the mobile device to maintain stored competitions and locations with the location manager 1418. Distance from one or more courses can be detected. CNMS 1400 also includes terms and
一態様によれば、CNMS1400は、RMS1450で録画されたビデオならびに競技会ビデオプロセスおよび結果マネージャ1424を使用して、どのプレーヤが競技会に勝つかを決定するために競技会のビデオを処理する。例えば、ユーザがRMS1450およびアクティブなゲームまたは競技会を有するゴルフコースで提示されるゲームをプレイすることを選択した場合、RMS1450およびCNMS1400は、特定のゴルフコースおよびホールでユーザに対して録画された競技会ベースのビデオとしてビデオを識別する。録画されたビデオのビデオデータまたは情報は、競技会ビデオの識別子を含み、CNMS1400を利用して、ゴルファーがどのように成績したかの結果を判定することができる。特定のホールでRMS1450を使用して、ゴルファーは購入代金を支払うことができ、購入マネージャ1422は、ゴルファーが参加しているという検証をRMS1450に送信することができる。次いで、RMS1450はゴルファーのショットを録画し、ビデオが特定のRMSから通信されると、購入マネージャならびにビデオプロセスおよび結果マネージャ1424はユーザが参加者であることを確認することができる。例えば、QRコード(登録商標)スキャン中にキャプチャされたビデオ画像内の特定のオブジェクトは、競技相手としてRMS1450によって識別され、タグ付けされ得る。競技相手の画像は、購入の支払いをしたゴルファーが実際に撮影したことを保証するために録画されたビデオと比較することができる。 According to one aspect, CNMS 1400 uses video recorded at RMS 1450 and a competition video process and results manager 1424 to process video of a competition to determine which player will win the competition. For example, if a user chooses to play a game presented on the RMS 1450 and a golf course that has an active game or competition, the RMS 1450 and CNMS 1400 may play a game that has been recorded for the user on a particular golf course and hole. Identify the video as a meeting-based video. The video data or information of the recorded video, including the competition video identifier, can be utilized by the CNMS 1400 to determine the outcome of how the golfer performed. Using the RMS 1450 on a particular hole, the golfer can pay for the purchase, and the purchase manager 1422 can send verification to the RMS 1450 that the golfer is participating. RMS 1450 then records the golfer's shots, and once the video is communicated from a particular RMS, purchasing manager and video process and results manager 1424 can confirm that the user is a participant. For example, a particular object in a video image captured during a QR code scan may be identified and tagged by the RMS 14 50 as a competitor. Competitor images can be compared to recorded videos to ensure that they were actually taken by the golfer who paid for the purchase.
別の態様によれば、各有効なユーザの競技会ビデオは、競技会ビデオプロセスおよび結果マネージャ1424によって処理されて、キャプチャされたビデオの結果を決定することができる。例えば、アップロードされた競技会ビデオは、プレイ中のゴルファー、コース、ホールおよび競技会を識別するビデオを有する情報ファイルまたはメタデータを含むことができる。競技会ビデオプロセスおよび結果マネージャ1424は、次に、撮影されたショットのパフォーマンスを決定するためにビデオを処理する。例えば、ショットが最長ドライブ中であった場合、競技会ビデオプロセスおよび結果マネージャ1424は、図4のセンサデータマネージャ430またはショットトレースマネージャ426にアクセスして、総飛行距離を決定することができる。競技会ビデオプロセスおよび結果マネージャ1424は、必要に応じて距離を三角測量するために、複数のAI対応カメラビデオ録画にアクセスすることもできる。個人のパフォーマンスの結果を決定すると、スコアボードマネージャ1426は、コースおよびゲームごとのスコアデータベースを有するクラウドストレージ1404内で更新および維持することができる。 According to another aspect, each valid user's competition video may be processed by competition video process and results manager 1424 to determine the results of the captured video. For example, an uploaded competition video may include an information file or metadata with the video identifying the golfer, course, hole, and competition being played. Competition video process and results manager 1424 then processes the video to determine the performance of the shot shot. For example, if the shot was on the longest drive, the competition video process and results manager 1424 may access the sensor data manager 430 or the shot trace manager 426 of FIG. 4 to determine the total distance flown. Competition video process and results manager 1424 can also access multiple AI-enabled camera video recordings to triangulate distances as needed. Once the individual performance results are determined, the scoreboard manager 1426 can be updated and maintained in cloud storage 1404 with a score database for each course and game.
別の形態では、競技会ビデオプロセスおよび結果マネージャ1424を使用して、ホールインワンが達成されたかどうかを判定するために競技会ビデオを処理することができる。例えば、競技会ビデオおよび情報は、ホールインワンのビデオ録画ショットであるとしてマークされてもよい。AIロジック1412にアクセスして、ゴルフコースのゴルフホールを識別し、フレームごとに、ボールがその特定のホールのカップに入るかどうかをさらに識別することができる。上述したように、AIロジックを特定のコースについて作成し、ビデオ/画像プロセッサ1410、GPU1408、およびAIロジック1412を使用して録画されたビデオと比較することができる。ショットがカップに入ってカップ内に残っている場合、競技会ビデオは、そのビデオの競技会ビデオ情報内でホールインワンであるとしてマークされ得る。クラウドストレージ1404は、それに応じて更新することができる。
In another form, the competition video process and results manager 1424 may be used to process the competition video to determine whether a hole-in-one was achieved. For example, competition video and information may be marked as being a video recorded shot of a hole-in-one.
さらなる形態では、競技会ビデオプロセスおよび結果マネージャ1424は、停止したボールのピンからの距離を判定するために競技会ビデオを処理するために使用され得る。例えば、競技会ビデオおよび情報は、C2P競技会ビデオとしてマーキングされ得る。RMS1450およびCNMS1400を使用して、本明細書に記載の様々な方法でボールのピンからの距離を計算することができる。例えば、RMS1450は、ボールのピンからの距離を三角測量するために使用できる複数のAI対応カメラを有することができる。距離を決定すると、スコアボードマネージャ1426は、クラウドストレージおよびサービス1404内のデータベースを更新して、ボールのピンからの距離を提供することができる。日が進み、追加のショットが追加されると、スコアボードマネージャ1426は、データベースを更新して、新たなショットをスコアボードに追加することができる。また、スコアボードマネージャ1426は、スコアボードのデータベースのソート順序を最短から最長(例えば、最も小さい距離から最も遠い距離)に更新し、スコアボードマネージャ1426が特定のコースのスコアボードを特定のデジタルメディア対応宛先1448に表示または出力できるようにしてもよい。したがって、競技会のために撮影されたほぼリアルタイムの結果を、選択された宛先でリフレッシュ、更新、および表示することができる。一形態では、パブリック競技会では、プレーヤに参加を奨励するために全距離が好ましくない場合があり、ラウンドまたは日が終了したときにのみ実際の距離が表示される。他の形態では、競技会は、午前の競技会または午後の競技会であってもよい。次に、次の競技会が開始されるか、または最後の競技会が終了すると、それぞれの結果が掲載される。表示のための様々な他の時間間隔は、スコアボードマネージャ1426によって提供することができる。別の形態では、競技会がプライベート競技会である場合、スコアボードマネージャ1426は、招待者にのみスコアボードを閲覧させることができる。 In a further form, the competition video process and results manager 1424 may be used to process the competition video to determine the distance of the stopped ball from the pin. For example, competition videos and information may be marked as C2P competition videos. The RMS 1450 and CNMS 1400 can be used to calculate the distance of the ball from the pin in various ways described herein. For example, the RMS 1450 can have multiple AI-enabled cameras that can be used to triangulate the distance of the ball from the pin. Once the distance is determined, the scoreboard manager 1426 can update a database in the cloud storage and service 1404 to provide the distance of the ball from the pin. As the day progresses and additional shots are added, the scoreboard manager 1426 can update the database to add new shots to the scoreboard. The scoreboard manager 1426 also updates the sort order of the scoreboard database from shortest to longest (e.g., smallest distance to farthest distance), and the scoreboard manager 1426 updates the scoreboard for a particular course to a particular digital media. It may also be possible to display or output it to the corresponding destination 1448. Thus, near real-time results taken for the competition can be refreshed, updated and displayed at the selected destination. In one form, in public competitions, the full distance may not be preferred to encourage players to participate, and the actual distance is displayed only when the round or day ends. In other forms, the competition may be a morning competition or an afternoon competition. Then, when the next competition starts or the last competition ends, the respective results will be posted. Various other time intervals for display may be provided by scoreboard manager 1426. In another form, if the competition is a private competition, the scoreboard manager 1426 may allow only invitees to view the scoreboard.
競技会が完了すると、勝者検出マネージャ1428は、記憶されたスコアボードにアクセスして、どのプレーヤが競技会に勝ったかを決定することができる。例えば、スコアボードマネージャ1426は、コースおよびホールごとにスコアボードデータベースを更新することができ、競技会が終了したとき、勝者検出マネージャ1428は、各ゲームまたは競技会にアクセスして、勝者を決定することができる。勝者検出マネージャ1428は、電子メール、通知、テキストなどのメッセージを開始して、プレーヤに、彼らが競技会に勝ったことを通知することができる。
Once the competition is complete, the
別の態様によれば、ユーザの名前を記憶しているスコアボードマネージャ1426は、支払いを提供するためにユーザプロファイル422などのユーザのプロファイル情報へのアクセスを可能にする。各々の日または競技会の終わりに、賞金マネージャ1430は、行われた競技会に基づいて、勝者がいるか否か、および各勝者に対する賞金が何であるべきかを決定することができる。例えば、ニアピン競技会の賞金が1000ドルであった場合、賞金マネージャ1430は、支払いプラットフォーム(明示的には図示せず)にアクセスして個人に支払うことができる。一形態では、支払いは、PaypalまたはVenmoアカウントなどのアカウントに自動的に支払われてもよい。他の形態では、賞金マネージャ1430は、紙小切手支払いがユーザに送られるイベントを開始することができる。様々な他の形態の支払いを、賞金マネージャ1430によって設定および使用することができる。
According to another aspect, the scoreboard manager 1426 that remembers the user's name allows access to the user's profile information, such as the user profile 422, to provide payments. At the end of each day or competition,
別の態様によれば、賞金マネージャ1430は、賞金に関連する租税を控除することもできる。例えば、勝者が1万ドルを受け取る権利がある場合、賞金マネージャ1430は、勝者に課税レベルとしてフラグを立て、勝者に賞金を支払う前に、プレーヤに対する源泉課税を開始することができる。そして、勝者に対して源泉課税額を支払うことができる。
According to another aspect,
さらなる態様によれば、賞金マネージャ1430は、競技会の勝者以外の当事者にも支払うことができる。例えば、毎日のC2P競技会がゴルフコースで行われており、プレイのための全体的な収益が毎日収集される場合、ゴルフコースとサードパーティのサービスプロバイダとの間でプレイのための料金を共有することができる。例えば、賞金が勝者に対して100ドルであり、500ドルの料金が回収された場合、賞金マネージャ1430は、ゴルファー(100ドル)、ゴルフコース(200ドル)、およびサービスプロバイダ(200ドル)の各々について分け前を計算することができる。したがって、賞金マネージャ1430は、ゴルフコースまたはサードパーティが賞金を維持、計算、および分配する必要なく、自動的に収益を分配することができる。ビデオ録画および競技会プレイを自動化する多様な方法をCNMS1400に提供することにより、ゴルファーの全体的なゴルフ体験は、スポーツへの関心を高めながら大幅に向上させることができる。
According to further aspects, the
図15は、本開示の一態様による自律型ゴルフ競技会を提供する方法のブロック図を示す。本方法は、図1に示すAMPS100、図14に示すCNMS1400、または図15の方法を使用することができる他のシステムまたはデバイスによって使用することができる。本方法は、一般に、図15の方法を起動すると一連の決定木を起動することができ、複数の異なる順序およびシーケンスで展開することができるステップ1500で始まる。さらに、丸付きの「A」は、図示された決定木シーケンス内の「から」および「へ」の位置を示す。必要または所望に応じて、他のループも使用することができる。本方法内で必要とされる入力は、以前に記憶されたデータ、新しいデータ、ユーザインタフェースからの情報入力、またはそれらの様々な組合せから生じ得る。一形態によれば、図15の方法またはその一部は、図15の方法へのサードパーティアクセスを有するアプリケーションプログラムインタフェース(API)として提供されることが可能である。
FIG. 15 depicts a block diagram of a method of providing autonomous golf competitions according to one aspect of the present disclosure. The method can be used by the AMPS 100 shown in FIG. 1, the CNMS 1400 shown in FIG. 14, or other systems or devices that can use the method of FIG. 15. The method generally begins at
判断ステップ1502において、競技会を更新または有効化すると判定された場合、方法はステップ1512に進む。競技会の更新は、定期的にまたは間隔を置いて行われてもよく、特定の日に行われる単一のイベントまたは競技会であってもよい。競技会が有効化されるべきである場合、方法はステップ1512に進み、コースを有効化し、ステップ1514に進み、どのホールが競技会のために選択されているかを判定する。次いで、方法はステップ1516に進むことができ、特定のホールでプレイするようにゲームを選択することができる。例えば、パー3は、ニアピン選択を有することができる。次いで、方法はステップ1518に進むことができ、購入および賞金を決定することができる。例えば、購入は、20ドルなどの特定のレベルであってもよいし、自動的に選択または増加されてもよい。さらに、賞金に値を提供することができるが、他の形態では、賞金は固定または自動的に決定することができる。ある競技会の購入および賞金を決定すると、本方法はステップ1520に進み、別の競技会またはゲームがそのコースに対して更新または有効化されるべきかどうかを決定する。例えば、ゴルフコースは、ニアピン競技会およびホールインワン競技会を有したい場合がある。各競技会は、別々のホールに設けることができ、一形態では、同じホールに設けることができる。ゲームを追加または更新すると、本方法は、ステップ1522に進み、ゴルフコースのコース競技会データを更新することができる。コース競技会データまたは情報は、プレイに利用可能な競技会の特定の詳細を含むことができ、競技会情報にアクセスして表示するように構成されたユーザインタフェースにアクセスするユーザに表示するために使用することができる。次いで、方法は、必要または所望に応じて各ゴルフコース競技会の更新に進むことができる。
If at
判断ステップ1504において、購入イベントを検出することができる。例えば、コースおよび競技会情報は、モバイルアプリ、モバイルデバイス、コンピュータ、または競技会にアクセスすることができる様々な他のインタフェースを使用してゴルファーがアクセスすることができる。一形態によれば、図12のユーザインタフェースは、図15の方法とともに使用することができる。購入イベントが検出された場合、方法はステップ1524に進んで選択されたコースが決定され、ステップ1526に進んでプレイされるべきホールも決定される。次いで、方法は、ステップ1528に進んでプレイされるゲームを決定し、ステップ1530に進んで価格を決定することができる。次いで、方法はステップ1532に進み、どの条項に合意すべきかを決定することができる。コース、ホール、ゲームまたは競技会、購入価格、および賞金を含む各情報要素は、ユーザインタフェース(明示的には図示せず)内でユーザに提示することができる。条項をユーザに提示することができ、ステップ1534において、本方法は、ユーザが条項に同意したか否かを検出することができる。ユーザが同意しなかった場合、方法はステップ1504に進み、繰り返すか、または終了する。ユーザが条項に同意した場合、方法はステップ1536に進み、支払い処理が有効になる。判断ステップ1538において、支払いが成功した場合、方法は、ユーザが競技会に参加することを可能にするために進む。支払いが成功しなかった場合、方法はステップ1540に進み、新しい支払い方法を要求し、判断ステップ1542に進み、支払いが成功したか否かを検出する。支払いが成功した場合、方法はステップ1546に進み、そこで競技会がユーザに対して有効にされる。支払いが再び成功しなかった場合、方法はステップ1544に進み、そのユーザの購入オプションを無効にし、支払いオプションが解決されるまで競技会はそのユーザに利用できなくなる。
At
一態様によれば、決定ステップ1508において競技会ビデオが受信された場合、本方法はステップ1560に進み、ビデオの処理を開始することができる。例えば、ビデオおよびビデオ情報は、RMSまたは他のデータソースまたはサービスから提供されていてもよく、ステップ1560でコースが決定され、ステップ1562でホールが決定され、ステップ1564でゲームまたは競技会を決定する。次いで、本方法は、ステップ1566に進み、プレーヤを検出または識別することができる。例えば、プレーヤプロファイルまたはモバイル情報をビデオとともに提供することができ、他の形態では、ゴルファーの画像を検証してビデオ内のプレーヤを識別することができる。本明細書で説明するように、様々な他の形態のプレーヤ識別および検出も使用することができる。プレーヤを識別すると、方法は判断ステップ1568に進み、ビデオが有効な競技会ビデオであると判定することができる。一形態では、識別されたプレーヤは、特定の競技会においてプレイするために購入するプレーヤについてメモリ内に記憶される購入証明書を含む。したがって、識別されたプレーヤの購入証明書を使用して、ビデオを競技会ビデオとして処理することができる。ビデオ、プレーヤ、または購入証明書を検証することができない場合、本方法は、ステップ1570に進み、ビデオを無効な競技会ビデオとしてマークし、ステップ1572に進み、無効なビデオが送信されたことをコースマネージャまたはサービスプロバイダに通知することができる。他の形態では、方法は、プレーヤ用のビデオを非競技会ベースのビデオとして処理し、ビデオをエンドユーザに配信することに進むことができる。このようにして、方法は、検証されたビデオのみを処理するために使用することができ、それによって、非プレーヤが権利を与えられていないゲームまたは競技会へのアクセスを得る可能性を低減する。ステップ1568において、ビデオが競技会ビデオとして検証された場合、方法は、ステップ1574に進み、本明細書で説明されるようにプレイされているゲームに基づいてビデオを処理することができる。次いで、方法はステップ1576に進むことができ、それに応じて競技会のスコアボードを更新することができる。 According to one aspect, if competition video is received in decision step 1508, the method may proceed to step 1560 and begin processing the video. For example, the video and video information may be provided from RMS or other data sources or services, the course is determined in step 1560, the holes are determined in step 1562, and the game or competition is determined in step 1564. . The method can then proceed to step 1566 and detect or identify the player. For example, player profiles or mobile information can be provided with the video, and in other forms, images of the golfer can be verified to identify the player in the video. Various other forms of player identification and detection may also be used, as described herein. Once the player is identified, the method may proceed to decision step 1568 and determine that the video is a valid competition video. In one form, the identified player includes purchase credentials stored in memory for players purchasing to play in a particular competition. Thus, the identified player's purchase credentials can be used to process the video as a competition video. If the video, player, or proof of purchase cannot be verified, the method proceeds to step 1570 and marks the video as an invalid competition video and proceeds to step 1572 to indicate that an invalid video was submitted. The course manager or service provider may be notified. In other forms, the method may proceed to process the video for the player as non-competition-based video and distribute the video to the end user. In this way, the method can be used to process only verified videos, thereby reducing the possibility that non-players gain access to games or competitions to which they are not entitled. . If the video is verified as a competition video in step 1568, the method may proceed to step 1574 and process the video based on the game being played as described herein. The method can then proceed to step 1576 and update the competition scoreboard accordingly.
判断ステップ1510において、方法は、賞金が提供される必要があるか否かを判定することができ、ステップ1578に進む。例えば、毎日の競技会が行われている場合、その日の終わりに、方法はステップ1578に進み、コースを識別し、ステップ1580でゲームを識別し、ステップ1582で勝者を決定することができる。例えば、特定のゲームおよび特定のコースのスコアボードをデータベースに保持することができ、その日の終わりに、そのゲームのスコアボードにアクセスして、勝者が誰であるかを判定することができる。いくつかの形態では、プレイされている競技会に応じて2人以上の勝者が存在してもよく、複数の勝者を識別することができる。勝者を決定すると、方法はステップ1584に進み、1人または複数の勝者に対する賞金を決定する。例えば、競技会において1人の勝者のみが発生した場合、その勝者はすべての賞金を受け取る。しかし、2人が勝利した場合には、勝者間で収益が分割されてもよい。その他の形態では、各勝者はその全額の価値を獲得することができる。支払いを決定すると、方法はステップ1586に進み、勝者への支払いを開始することができる。次いで、方法はステップ1588に進むことができ、他のプレーヤまたはサードパーティに支払いが必要な場合、方法は支払いを開始することに進む。次いで、方法は、ステップ1590に進み、別の競技会が処理されるべきかどうかを判定し、それに応じて処理するために1578で繰り返すことができる。 At decision step 1510, the method may determine whether a prize needs to be provided and proceeds to step 1578. For example, if a daily competition is being held, at the end of the day, the method may proceed to step 1578 to identify the course, step 1580 to identify the game, and step 1582 to determine the winner. For example, a scoreboard for a particular game and a particular course can be maintained in a database, and at the end of the day, the scoreboard for that game can be accessed to determine who the winner is. In some forms, there may be more than one winner depending on the competition being played, and multiple winners may be identified. Once the winners are determined, the method proceeds to step 1584 and determines a prize for one or more winners. For example, if only one winner occurs in a competition, that winner receives all prize money. However, if two people win, the proceeds may be split between the winners. In other forms, each winner may earn the full value. Once a payout is determined, the method proceeds to step 1586 where a payout to the winner may begin. The method can then proceed to step 1588, and if a payment is required to the other player or third party, the method proceeds to initiate the payment. The method can then proceed to step 1590 and repeat at 1578 to determine whether another competition is to be processed and processed accordingly.
様々な他の追加の方法ステップが上記の方法に含まれてもよく、または上記の方法は、上記のシステムの機能および機能に従って変更されてもよいことが理解されよう。そのような態様および実施形態は、コンピュータまたは他のコントローラによって実行される抽象的な概念を超えることが理解されよう。上記の態様は、容易にアクセスまたは決定することができない様々な入力に基づいて自動的に実行され、結果として得られる最終製品は、そうでなければ同じ自動方法で提供することができない。 It will be appreciated that various other additional method steps may be included in the method described above or the method described above may be modified according to the features and functionality of the system described above. It will be appreciated that such aspects and embodiments are more than abstract concepts implemented by a computer or other controller. The above aspects are performed automatically based on various inputs that cannot be easily accessed or determined, and the resulting final product could not otherwise be provided in the same automatic manner.
いくつかの例示的な実施形態のみを上記で詳細に説明したが、当業者は、本開示の実施形態の新規な教示および利点から実質的に逸脱することなく、例示的な実施形態において多くの修正が可能であることを容易に理解するであろう。したがって、すべてのそのような修正は、添付の特許請求の範囲に定義される本開示の実施形態の範囲内に含まれることが意図される。特許請求の範囲において、ミーンズプラスファンクション節は、列挙された機能を実行するものとして本明細書に記載された構造、および構造的均等物だけでなく、均等な構造も包含することが意図されている。 Although only some exemplary embodiments have been described in detail above, those skilled in the art will appreciate that many exemplary embodiments can be modified without departing substantially from the novel teachings and advantages of the embodiments of the present disclosure. It will be readily understood that modifications are possible. Accordingly, all such modifications are intended to be included within the scope of the embodiments of this disclosure as defined in the appended claims. In the claims, means-plus-function clauses are intended to encompass structures described herein as performing the recited functions, as well as structural equivalents, as well as equivalent structures. There is.
一般的な説明または実施例で上述した活動のすべてが必要とされるわけではなく、特定の活動の一部が必要とされなくてもよく、記載した活動に加えて1つまたは複数のさらなる活動が行われてもよいことに留意されたい。さらに、活動が列挙される順序は、必ずしもそれらが実行される順序ではない。 Not all of the activities mentioned above in the general description or examples may be required, some of the particular activities may not be required, and one or more further activities in addition to those described may be required. Note that may also be performed. Furthermore, the order in which activities are listed is not necessarily the order in which they are performed.
本明細書に記載の実施形態の明細書および例示は、様々な実施形態の構造の一般的な理解を提供することを意図している。本明細書および例示は、本明細書に記載の構造または方法を使用する装置およびシステムのすべての要素および特徴の網羅的かつ包括的な説明として役立つことを意図するものではない。多くの他の実施形態は、本開示を検討すれば当業者には明らかであろう。本開示の範囲から逸脱することなく、構造的置換、論理的置換、または別の変更を行うことができるように、他の実施形態を使用し、本開示から導出することができる。したがって、本開示は、限定的ではなく例示的であると見なされるべきである。 The specification and illustration of embodiments described herein is intended to provide a general understanding of the structure of various embodiments. The specification and examples are not intended to serve as an exhaustive or comprehensive description of all elements and features of devices and systems employing the structures or methods described herein. Many other embodiments will be apparent to those skilled in the art upon reviewing this disclosure. Other embodiments may be used and derived from this disclosure, so that structural substitutions, logical substitutions, or other changes may be made without departing from the scope of this disclosure. Accordingly, this disclosure should be considered illustrative rather than restrictive.
明確にするために、別個の実施形態の文脈で本明細書に記載されている特定の特徴は、単一の実施形態において組み合わせて提供されてもよい。逆に、簡潔にするために単一の実施形態の文脈で説明されている様々な特徴は、別個にまたは任意のサブコンビネーションで提供されてもよい。さらに、範囲に記載された値への言及は、その範囲内のありとあらゆる値を含む。利点、他の利点、および問題の解決策は、特定の実施形態に関して上述されている。しかしながら、利益、利点、問題の解決策、および任意の利益、利点、または解決策を発生またはより顕著にする可能性がある任意の特徴(複数可)は、請求項のいずれかまたはすべての重要な、必要な、または本質的な特徴として解釈されるべきではない。 Certain features that are, for clarity, described in this specification in the context of separate embodiments, may also be provided in combination in a single embodiment. Conversely, various features that are, for brevity, described in the context of a single embodiment, may also be provided separately or in any subcombination. Further, references to values stated in ranges include each and every value within that range. Advantages, other advantages, and solutions to problems are described above with respect to specific embodiments. However, any benefit, advantage, solution to a problem, and any feature(s) that may occur or make any benefit, advantage, or solution more prominent may be of interest to any or all of the claims. should not be construed as a necessary, necessary, or essential feature.
上記で開示された主題は、限定ではなく例示と見なされるべきであり、添付の特許請求の範囲は、本発明の範囲内に入る任意のおよびすべてのそのような修正、強化、および他の実施形態を網羅することを意図している。したがって、法律によって許容される最大限の範囲で、本発明の範囲は、以下の特許請求の範囲およびそれらの均等物の最も広い許容可能な解釈によって決定されるべきであり、前述の詳細な説明によって制限または限定されるべきではない。 The subject matter disclosed above is to be considered illustrative rather than limiting, and the appended claims are intended to cover any and all such modifications, enhancements, and other implementations that fall within the scope of this invention. It is intended to cover all forms. Therefore, to the fullest extent permitted by law, the scope of the invention should be determined by the broadest permissible interpretation of the following claims and their equivalents, and the foregoing detailed description shall not be restricted or limited by.
いくつかの例示的な実施形態のみを上記で詳細に説明したが、当業者は、本開示の実施形態の新規な教示および利点から実質的に逸脱することなく、例示的な実施形態において多くの修正が可能であることを容易に理解するであろう。したがって、すべてのそのような修正は、添付の特許請求の範囲に定義される本開示の実施形態の範囲内に含まれることが意図される。特許請求の範囲において、ミーンズプラスファンクション節は、列挙された機能を実行するものとして本明細書に記載された構造、および構造的均等物だけでなく、均等な構造も包含することが意図されている。 Although only some exemplary embodiments have been described in detail above, those skilled in the art will appreciate that many exemplary embodiments can be modified without departing substantially from the novel teachings and advantages of the embodiments of the present disclosure. It will be readily understood that modifications are possible. Accordingly, all such modifications are intended to be included within the scope of the embodiments of this disclosure as defined in the appended claims. In the claims, means-plus-function clauses are intended to encompass structures described herein as performing the recited functions, as well as structural equivalents, as well as equivalent structures. There is.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023140913A JP2023169203A (en) | 2020-06-04 | 2023-08-31 | Autonomous golf competition systems and methods |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US202063034667P | 2020-06-04 | 2020-06-04 | |
US63/034,667 | 2020-06-04 | ||
PCT/US2021/035974 WO2021248050A1 (en) | 2020-06-04 | 2021-06-04 | Autonomous golf competition systems and methods |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023140913A Division JP2023169203A (en) | 2020-06-04 | 2023-08-31 | Autonomous golf competition systems and methods |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023528892A JP2023528892A (en) | 2023-07-06 |
JPWO2021248050A5 true JPWO2021248050A5 (en) | 2024-01-26 |
Family
ID=78830605
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022574630A Pending JP2023528892A (en) | 2020-06-04 | 2021-06-04 | AUTONOMOUS GOLF COMPETITION SYSTEM AND METHOD |
JP2023140913A Pending JP2023169203A (en) | 2020-06-04 | 2023-08-31 | Autonomous golf competition systems and methods |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023140913A Pending JP2023169203A (en) | 2020-06-04 | 2023-08-31 | Autonomous golf competition systems and methods |
Country Status (7)
Country | Link |
---|---|
US (5) | US11601623B2 (en) |
EP (2) | EP4302843A1 (en) |
JP (2) | JP2023528892A (en) |
KR (2) | KR20230130166A (en) |
AU (2) | AU2021284458A1 (en) |
CA (1) | CA3180246A1 (en) |
WO (1) | WO2021248050A1 (en) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11601623B2 (en) * | 2020-06-04 | 2023-03-07 | Hole-In-One Media, Inc. | Autonomous golf competition systems and methods |
US11660522B2 (en) * | 2020-12-29 | 2023-05-30 | Comart System Co., Ltd. | System and method for providing golf information for golfer |
US11887448B2 (en) | 2021-02-18 | 2024-01-30 | Dice Corporation | Digital video alarm guard tour monitoring computer system |
US11853100B2 (en) * | 2021-04-12 | 2023-12-26 | EMC IP Holding Company LLC | Automated delivery of cloud native application updates using one or more user-connection gateways |
US20220335816A1 (en) * | 2021-04-16 | 2022-10-20 | Dice Corporation | Digital video alarm analytics computer system |
US11790764B2 (en) | 2021-04-16 | 2023-10-17 | Dice Corporation | Digital video alarm situational monitoring computer system |
US11741825B2 (en) | 2021-04-16 | 2023-08-29 | Dice Corporation | Digital video alarm temporal monitoring computer system |
US11688273B2 (en) | 2021-04-16 | 2023-06-27 | Dice Corporation | Digital video alarm monitoring computer system |
JP2023008828A (en) * | 2021-07-02 | 2023-01-19 | キヤノン株式会社 | Imaging apparatus, method for controlling imaging apparatus, program, and information processing apparatus |
US20240017150A1 (en) * | 2022-07-14 | 2024-01-18 | Christopher Brigdale | System and method of capturing and recording video content of golf ball striking and subsequent flight |
US11779809B1 (en) | 2022-07-29 | 2023-10-10 | Topgolf International, Inc. | Method and system utilizing a golf shot API proxy |
Family Cites Families (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8006261B1 (en) * | 2000-04-07 | 2011-08-23 | Visible World, Inc. | System and method for personalized message creation and delivery |
US20050192124A1 (en) * | 2004-03-01 | 2005-09-01 | Ultimate Golf Challenge, Inc. | Method and system for implementing a closest to the pin challenge |
JP2005013765A (en) * | 2004-10-15 | 2005-01-20 | Takao:Kk | Game machine |
US9306952B2 (en) | 2006-10-26 | 2016-04-05 | Cfph, Llc | System and method for wireless gaming with location determination |
US20080108456A1 (en) | 2006-11-02 | 2008-05-08 | Bonito Anthony P | Golf scoring, marketing and reporting system and method of operation |
US8460111B2 (en) * | 2007-06-19 | 2013-06-11 | Qualcomm Incorporated | Methods and apparatus for determining distances to selected targets on a golf course using a wireless communication device |
US20090191929A1 (en) | 2008-01-24 | 2009-07-30 | Full Swing Golf | Golf simulator connected to the internet |
GB0810457D0 (en) * | 2008-06-07 | 2008-07-09 | Reid Martin | Gold system |
US8439766B1 (en) * | 2010-02-04 | 2013-05-14 | Lincoln Tyler George Brown | System and method for enhancing golf |
US9940508B2 (en) | 2010-08-26 | 2018-04-10 | Blast Motion Inc. | Event detection, confirmation and publication system that integrates sensor data and social media |
KR101466304B1 (en) * | 2012-05-09 | 2014-12-10 | (주) 골프존 | Providing system for golf information, information guiding device for providing golf information, and providing method for golf information |
US9383448B2 (en) | 2012-07-05 | 2016-07-05 | Deca System Co., Ltd. | Golf GPS device with automatic hole recognition and playing hole selection |
US20140359060A1 (en) * | 2013-05-31 | 2014-12-04 | Arc Media Inc. | Method and system for location-based digital golf media delivery |
US20150077556A1 (en) * | 2013-09-13 | 2015-03-19 | Ford Global Technologies, Llc | Vehicle system for automated video recording |
US9542596B2 (en) * | 2013-12-26 | 2017-01-10 | Freeman & Freeman Golf, Inc. | Systems and apparatus for facilitating the production and presentation of strokes gained golf statistics |
US20160158624A1 (en) * | 2014-12-05 | 2016-06-09 | 10&8 | Golf game reward system and method |
US11159854B2 (en) * | 2014-12-13 | 2021-10-26 | Fox Sports Productions, Llc | Systems and methods for tracking and tagging objects within a broadcast |
US11263461B2 (en) * | 2015-10-05 | 2022-03-01 | Pillar Vision, Inc. | Systems and methods for monitoring objects at sporting events |
WO2017103674A1 (en) * | 2015-12-17 | 2017-06-22 | Infinity Cube Ltd. | System and method for mobile feedback generation using video processing and object tracking |
CN107596677B (en) * | 2016-07-12 | 2021-01-05 | 雅达朗知识产权有限公司 | Online cup ball throwing game system |
JP7095677B2 (en) * | 2017-02-28 | 2022-07-05 | ソニーグループ株式会社 | Information processing equipment, information processing method, program |
US10946243B1 (en) * | 2018-04-23 | 2021-03-16 | James Smith | Integrated hole-in-one verification system with a progressive reward |
WO2019229748A1 (en) * | 2018-05-28 | 2019-12-05 | United Perfectum Ltd. | Golf game video analytic system |
US20200042888A1 (en) * | 2018-07-31 | 2020-02-06 | Gyrfalcon Technology Inc. | Self-sufficient artificial intelligence edge devices |
US11601623B2 (en) * | 2020-06-04 | 2023-03-07 | Hole-In-One Media, Inc. | Autonomous golf competition systems and methods |
US11551275B2 (en) | 2020-06-05 | 2023-01-10 | Direct Offer, Inc. | Algorithm and technical system for displaying offers |
-
2021
- 2021-06-04 US US17/339,719 patent/US11601623B2/en active Active
- 2021-06-04 EP EP23191275.9A patent/EP4302843A1/en active Pending
- 2021-06-04 EP EP21817388.8A patent/EP4161666A4/en active Pending
- 2021-06-04 WO PCT/US2021/035974 patent/WO2021248050A1/en active Search and Examination
- 2021-06-04 KR KR1020237029604A patent/KR20230130166A/en active Search and Examination
- 2021-06-04 AU AU2021284458A patent/AU2021284458A1/en active Pending
- 2021-06-04 CA CA3180246A patent/CA3180246A1/en active Pending
- 2021-06-04 KR KR1020227044642A patent/KR20230021006A/en active Search and Examination
- 2021-06-04 US US17/339,771 patent/US11558585B2/en active Active
- 2021-06-04 JP JP2022574630A patent/JP2023528892A/en active Pending
-
2022
- 2022-12-01 US US18/073,259 patent/US11956572B2/en active Active
- 2022-12-20 US US18/084,815 patent/US20230124155A1/en active Pending
-
2023
- 2023-08-11 AU AU2023214372A patent/AU2023214372A1/en active Pending
- 2023-08-31 JP JP2023140913A patent/JP2023169203A/en active Pending
-
2024
- 2024-02-28 US US18/589,575 patent/US20240205375A1/en active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11956572B2 (en) | Autonomous golf competition systems and methods | |
JP2023169203A5 (en) | ||
US12100211B2 (en) | Autonomous activity monitoring system and method | |
US11729490B2 (en) | Autonomous digital media processing systems and methods | |
US12005337B2 (en) | Autonomous digital media processing systems and methods | |
JPWO2021248050A5 (en) | ||
US20240259537A1 (en) | Autonomous digital media processing systems and methods including quick response codes | |
CA3208026A1 (en) | Autonomous digital media processing systems and methods | |
US20240346484A1 (en) | Computerized system and method for providing an activity based, interactive cryptocurrency and nft marketplace |