JP2019501550A - Golf video information automatic generation system and golf video information automatic generation method - Google Patents

Golf video information automatic generation system and golf video information automatic generation method Download PDF

Info

Publication number
JP2019501550A
JP2019501550A JP2018517854A JP2018517854A JP2019501550A JP 2019501550 A JP2019501550 A JP 2019501550A JP 2018517854 A JP2018517854 A JP 2018517854A JP 2018517854 A JP2018517854 A JP 2018517854A JP 2019501550 A JP2019501550 A JP 2019501550A
Authority
JP
Japan
Prior art keywords
video
golf
unit
ball
video information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018517854A
Other languages
Japanese (ja)
Other versions
JP6596746B2 (en
Inventor
ヒョン ジュ、サン
ヒョン ジュ、サン
Original Assignee
ゴルフゾン カンパニー リミテッド
ゴルフゾン カンパニー リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ゴルフゾン カンパニー リミテッド, ゴルフゾン カンパニー リミテッド filed Critical ゴルフゾン カンパニー リミテッド
Publication of JP2019501550A publication Critical patent/JP2019501550A/en
Application granted granted Critical
Publication of JP6596746B2 publication Critical patent/JP6596746B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8549Creating video summaries, e.g. movie trailer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof

Abstract

【課題】
【解決手段】本発明は単純なホールインワン確認又はニアピン認証などの以外にゴルフラウンドをしている使用者に対してゴルフショットからそのゴルフショットされたボールの目標地点を含む領域上での動きまで一連の過程を見せる映像情報を編集してゴルフ映像情報を自動で生成することによって、使用者にゴルフショットに対する記念となることができる映像コンテンツを提供することができるゴルフ映像情報自動生成システム及びゴルフ映像情報自動生成方法を提供するためのものである。
【Task】
In addition to simple hole-in-one confirmation or near-pin authentication, the present invention provides a series of courses from a golf shot to a movement on an area including a target point of the golf shot ball for a user who is playing a golf round. Golf video information automatic generation system and golf video capable of providing video content that can be a memorial to a golf shot by automatically generating golf video information by editing video information showing the process of This is to provide an automatic information generation method.

Description

本発明はゴルフ映像情報自動生成システム及びゴルフ映像情報自動生成方法に関するもので、より詳しくは、ゴルフ場でゴルフラウンドを行う使用者がゴルフボールをゴルフショットして、打撃されたボールが飛んで目標地点の近くに着地する一連の過程を効果的に映像で記録し編集して該当使用者にゴルフラウンドに対する記念となることができるコンテンツを提供するようにするシステムとそのシステムによって駆動されるプロセスに関するものである。   More particularly, the present invention relates to a golf video information automatic generation system and a golf video information automatic generation method. More specifically, a user who performs a golf round on a golf course hits a golf ball and the hit ball flies. The present invention relates to a system that effectively records and edits a series of processes of landing near a point and provides contents that can be memorized for a golf round to a corresponding user, and a process driven by the system Is.

ゴルフ場でゴルフラウンドをする大多数のゴルファーはゴルフラウンド過程でゴルフショットしたボールが適切にグリーンに着地する、ボールがグリーン上のホールカップに非常に近くに着地する、又は時にはホールインワン又はアルバトロスのような驚くべき記録を経験することもある。   The majority of golfers who play golf rounds at the golf course have the ball shot in the course of the golf round properly land on the green, the ball land very close to the hole cup on the green, or sometimes like hole-in-one or Albatross Sometimes experience amazing records.

例えば、普段ゴルフラウンドをするとき、グリーン的中率が低くて適切なオングリーンをしたことがなかった使用者がPar3ホールでティーショットしたボールが適切にオングリーンした場合、その使用者にはそのゴルフショットが実に驚くべき経験となるであろう。   For example, if a user who has never played a proper on-green when playing a golf round usually hit a green tee shot in the Par3 hole, Golf shots will be a truly amazing experience.

また、同伴ラウンドをする人々同士Par3ホールにおいてティーショットによるボールがグリーン上のホールカップにいくら近くに着地するかを競争する場合、すなわちニアピン(Near Pin)競争をする場合が多い。そのニアピン競争で勝者となる場合にも該当使用者には実に驚くべき経験となるであろう。   In addition, there are many cases in which companion rounds compete in the Par3 hole for how close the ball from the tee shot lands to the hole cup on the green, that is, a near pin competition. Even if you win in the near-pin competition, it will be an amazing experience for the user.

特に、Par3ホールでホールインワンを記録する場合には、該当使用者には一生忘れない驚くべき経験となるであろう。   In particular, when recording a hole-in-one in the Par3 hole, it will be a surprising experience that the user will never forget.

しかし、前述したように、ゴルフラウンド過程でゴルファーは非常に驚くべき経験をすることになるが、従来にはゴルファーがそのような驚くべき経験を記録しておき、記念とすることができるコンテンツを作って提供することができるシステムなどに関する技術が具現されなかった問題点があった。   However, as mentioned above, golfers will have a very surprising experience during the golf round process, but in the past content that golfers could record such a surprising experience and commemorate it. There was a problem that the technology related to the system that can be made and provided was not realized.

ところが、従来、日本国特開2013−248381号公報(ホールインワン確認システム及びそのカメラ)、日本国特開2004−46648号公報(ホールインワン認証システム)及び日本国特開2008−167245号公報(ホールインワン・ニアピン認定システム)などの多数の先行技術文献に、グリーン側にカメラを設置しておき、ティーボックスでゴルフショットしたものがホールインワンされるかを前記カメラの撮影映像を分析して確認することによってホールインワンであるか又はニアピンであるかを判断する技術が公知となっている。   However, Japanese Unexamined Patent Publication No. 2013-248381 (hole-in-one confirmation system and its camera), Japanese Unexamined Patent Publication No. 2004-46648 (hole-in-one authentication system) and Japanese Unexamined Patent Publication No. 2008-167245 (hole-in-one near-pin). In a lot of prior art documents such as (Authorization System), a camera is installed on the green side, and the shot video of the camera is analyzed and confirmed whether a golf shot shot with a tee box is hole-in-one. Techniques for determining whether there is a near pin or near pin are known.

しかし、前述した公開公報などに開示された公知の技術は単に使用者がゴルフショットしたものがホールインワンとなったかなどに対して確認して該当使用者に知らせる又はグリーンの周辺でホールインワン又はニアピンに関連した撮影映像を提供するだけで、使用者のゴルフショットからグリーン上でのボールの動きなどの一連の過程を映像で記録して提供することができないので、該当使用者のゴルフショットとその記録に対する記念のためのコンテンツとしては非常に足りないという問題点があった。   However, the publicly-known technology disclosed in the above-mentioned publications merely confirms whether the golf shot made by the user has become hole-in-one, and informs the user of that or related to hole-in-one or near-pin around the green It is not possible to record and provide a series of processes such as the movement of a ball on the green from the user's golf shot, simply by providing the captured video. There was a problem that it was not enough as commemorative content.

日本国特開2013−248381号公報Japanese Unexamined Patent Application Publication No. 2013-248381 日本国特開2004−46648号公報Japanese Unexamined Patent Publication No. 2004-46648 日本国特開2008−167245号公報Japanese Unexamined Patent Publication No. 2008-167245

本発明は単純なホールインワン確認又はニアピンの認証などの外にゴルフラウンドをしている使用者に対してゴルフショットからそのゴルフショットされたボールの目標地点を含む領域上での動きまで一連の過程を見せる映像情報を編集してゴルフ映像情報を自動で生成することによって使用者にゴルフショットに対する記念となることができる映像コンテンツを提供することができるゴルフ映像情報自動生成システム及びゴルフ映像情報自動生成方法を提供するためのものである。   The present invention provides a series of processes from a golf shot to a movement on an area including a target point of the golf shot ball for a user who is playing a golf round outside such as simple hole-in-one confirmation or near-pin authentication. Golf video information automatic generation system and golf video information automatic generation method capable of providing video content that can be a memorial to a golf shot to a user by editing video information to be displayed and automatically generating golf video information It is for providing.

本発明の一実施例による、ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムは、撮影領域内で使用者のゴルフショットに対する映像を取得する第1撮影ユニットと、目標地点を含む領域を撮影する第2撮影ユニットと、前記第1撮影ユニット及び第2撮影ユニットからそれぞれ撮影された映像を収集し、前記第1撮影ユニット及び第2撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、前記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像情報処理装置とを含む。   According to an embodiment of the present invention, a system for automatically generating golf video information based on a user's golf shot in a golf course includes a first shooting unit that acquires a video of the user's golf shot in a shooting area, and a target point. A second image capturing unit that captures an area including the image, and images captured from each of the first image capturing unit and the second image capturing unit, and images collected from each of the first image capturing unit and the second image capturing unit. A video information processing apparatus for automatically generating the golf video information by determining an extraction section and editing each video extracted by the determined video extraction section according to a preset item.

一方、本発明の他の一実施例による、ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムは、ティーボックスに設置され、撮影領域内で使用者のゴルフショットに対する映像を取得し、前記ゴルフショットする使用者の側面を撮影する第1撮影ユニットと、グリーンを含む領域を撮影する第2撮影ユニットと、前記第1撮影ユニット及び第2撮影ユニットからそれぞれ撮影された映像を収集し、前記第1撮影ユニット及び第2撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、前記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像情報処理装置とを含む。   Meanwhile, according to another embodiment of the present invention, a system for automatically generating golf video information based on a user's golf shot at a golf course is installed in a tee box and displays a video of the user's golf shot within a shooting area. A first shooting unit for acquiring and shooting a side surface of the user who makes a golf shot, a second shooting unit for shooting an area including green, and images shot from the first shooting unit and the second shooting unit, respectively. Collecting, determining an extraction section of the video collected from each of the first shooting unit and the second shooting unit, and editing each video extracted by the determined video extraction section according to a preset item. And a video information processing apparatus that automatically generates the golf video information.

一方、本発明のさらに他の一実施例による、ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムは、ティーボックスに設置され、撮影領域内で使用者のゴルフショットに対する映像を取得するティーボックス撮影ユニットと、フェアウェイ上の一領域を撮影するように設置されるフェアウェイ撮影ユニットと、前記ティーボックス撮影ユニット及びフェアウェイ撮影ユニットからそれぞれ撮影された映像を収集し、前記ティーボックス撮影ユニット及びフェアウェイ撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、前記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像情報処理装置とを含む。   Meanwhile, a system for automatically generating golf video information based on a user's golf shot at a golf course according to still another embodiment of the present invention is installed in a tee box, and an image of the user's golf shot within a shooting area. A tee box shooting unit for acquiring the image, a fairway shooting unit installed so as to shoot an area on the fairway, and collecting images shot from the tee box shooting unit and the fairway shooting unit, respectively, and shooting the tee box. The golf video information is automatically obtained by determining an extraction section of the video collected from each of the unit and the fairway shooting unit, and editing each video extracted by the determined video extraction section according to a preset matter. With video information processing device Including.

一方、本発明のさらに他の一実施例による、ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムは、ゴルフ場の特定ホールの一側に設置され、撮影領域内で使用者のゴルフショットに対する映像を取得する第1撮影ユニットと、前記特定ホールの他側に設置され、パンチルトズーム駆動が可能であり、予め設定された事項によってズームイン、ズームアウト、及び上下及び左右の少なくとも一方への回転によるビュー変更の少なくとも一つを行って、前記使用者がゴルフショットすることによる映像を撮影するように構成される第2撮影ユニットと、前記第1撮影ユニット及び第2撮影ユニットからそれぞれ撮影された映像を収集し、前記第1撮影ユニット及び第2撮影ユニットから収集されたそれぞれの映像から抽出された各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像情報処理装置とを含む。   Meanwhile, a system for automatically generating golf video information based on a user's golf shot at a golf course according to another embodiment of the present invention is installed on one side of a specific hole of the golf course and used in a shooting area. A first shooting unit for acquiring an image of the golf shot of the person, and is installed on the other side of the specific hole and is capable of pan / tilt zoom driving, and zooms in, zooms out and at least up / down and left / right according to preset items A second photographing unit configured to photograph at least one of the view changes by rotation to one side and photograph the user by taking a golf shot, and the first photographing unit and the second photographing unit. Each captured video is collected and collected from each of the first and second imaging units. By editing of the preset items each picture extracted from the picture includes a video information processing apparatus which automatically generates the golf video information.

一方、本発明の一実施例による、ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムのゴルフ映像情報自動生成方法は、少なくとも一つのカメラを含む第1撮影ユニットによってその撮影領域内で使用者がゴルフショットすることに対して撮影される映像を収集して格納部に格納する段階と、少なくとも一つのカメラを含む第2撮影ユニットによって目標地点を含む領域に対して撮影される映像を収集して前記格納部に格納する段階と、前記第1撮影ユニット及び第2撮影ユニットのそれぞれから収集された映像の抽出区間を決定する段階と、前記格納部に格納された各映像から前記決定された映像の抽出区間によって抽出した各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する段階とを含む。   Meanwhile, according to an embodiment of the present invention, a method for automatically generating golf video information of a system for automatically generating golf video information based on a user's golf shot on a golf course is shot by a first shooting unit including at least one camera. Collecting and storing in the storage unit images captured when a user makes a golf shot in the area, and shooting the area including the target point by a second imaging unit including at least one camera. Collecting the video to be stored in the storage unit, determining an extraction section of the video collected from each of the first shooting unit and the second shooting unit, and each video stored in the storage unit By editing each video extracted by the determined video extraction section from a predetermined item, the golf video is recorded. And generating an automatic information.

一方、本発明の他の一実施例による、ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムのゴルフ映像情報自動生成方法は、ゴルフ場の特定ホールの一側に設置された第1撮影ユニットによって撮影される使用者のゴルフショットに対する映像を収集して格納部に格納する第1撮影ユニット映像収集及び格納段階と、前記特定ホールの他側に設置され、パンチルトズーム駆動の可能な第2撮影ユニットによってズームイン、ズームアウト、及び上下及び左右の少なくとも一方への回転によるビュー変更の少なくとも一つを行って前記使用者がゴルフショットすることによって撮影される映像を収集して前記格納部に格納する第2撮影ユニット映像収集及び格納段階と、前記第1撮影ユニットから抽出された第1抽出映像及び第2撮影ユニットから抽出された第2抽出映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する段階とを含む。   Meanwhile, according to another embodiment of the present invention, a method for automatically generating golf image information of a system for automatically generating golf image information by a user's golf shot on a golf course is installed on one side of a specific hole of the golf course. A first shooting unit video collecting and storing stage that collects and stores a video shot of a user's golf shot taken by the first shooting unit and storing it in a storage unit; Collecting images captured by the user shooting a golf shot by performing at least one of zooming in, zooming out, and changing the view by rotating to at least one of up / down and left / right by a possible second shooting unit, A second photographing unit video collecting and storing step stored in the storage unit, and extracted from the first photographing unit; It was and generating automatically the golf video information by editing the first extraction image and predetermined matters second extraction image extracted from the second imaging unit.

本発明によるゴルフ映像情報自動生成システム及びゴルフ映像情報自動生成方法は、単純なホールインワン確認又はニアピンの認証などの外に、ゴルフラウンドをしている使用者に対してゴルフショットからそのゴルフショットされたボールの目標地点を含む領域上での動きまで一連の過程を見せる映像情報を編集してゴルフ映像情報を自動で生成することによって使用者にゴルフショットに対する記念となることができる映像コンテンツを提供することができる効果がある。   The golf video information automatic generation system and the golf video information automatic generation method according to the present invention were shot from a golf shot to a user who is playing a golf round in addition to simple hole-in-one confirmation or near-pin authentication. Provide video content that can be used as a memorial to golf shots by editing video information that shows a series of processes up to the movement of the ball on the area including the target point and automatically generating golf video information There is an effect that can.

本発明の一実施例によるゴルフ映像情報自動生成システムがゴルフ場の特定ホールに設置された例を示した図である。It is the figure which showed the example by which the golf video information automatic generation system by one Example of this invention was installed in the specific hole of a golf course.

図1に示した本発明が一実施例によるゴルフ映像情報自動生成システムの構成を示したブロック図である。1 is a block diagram showing a configuration of a golf video information automatic generation system according to an embodiment of the present invention shown in FIG.

本発明の一実施例によるゴルフ映像情報自動生成システムに用いられるゴルフ映像情報自動生成方法について説明するためのフローチャートである。5 is a flowchart for explaining a golf video information automatic generation method used in a golf video information automatic generation system according to an embodiment of the present invention;

本発明の一実施例によるゴルフ映像情報自動生成システムの第1カメラによって撮影された映像の一例を示すもので、該当映像で映像処理をする方法を説明するための図である。FIG. 3 is a diagram illustrating an example of a video image taken by a first camera of a golf video information automatic generation system according to an embodiment of the present invention, and illustrating a method for performing video processing on the corresponding video image.

第1カメラによって撮影されたn番目フレームからn+5番目フレームの映像を時系列的に示したもので、それぞれの映像内でボールを検出したものについて示した図であるIt is the figure which showed what detected the ball | bowl in each image | video which showed the image | video of the n + 5th frame image | photographed with the 1st camera in time series.

第1カメラによって撮影されたm番目フレームからm+5番目フレームの映像を時系列的に示したもので、それぞれの映像内でボールを検出したものについて示した図である。It is the figure which showed what detected the ball | bowl in each image | video which showed the image | video of the m + 5th frame image | photographed with the 1st camera in time series.

本発明の一実施例によるゴルフ映像情報自動生成システムの第3カメラによって撮影された映像の一例を示すもので、該当映像においてホールカップとボール間の距離の表示など、グリーン上の使用者に提供可能なゴルフ情報について表示された例を示した図である。1 shows an example of an image taken by the third camera of the golf image information automatic generation system according to an embodiment of the present invention, and provides a user on the green such as a display of a distance between a hole cup and a ball in the corresponding image. It is the figure which showed the example displayed about possible golf information.

本発明の一実施例によるゴルフ映像情報自動生成システムの映像情報処理装置によってそれぞれのカメラ映像から必要な映像を抽出して編集することによってゴルフ映像情報を生成する一例を示した図である。It is the figure which showed an example which produces | generates golf video information by extracting and editing a required image | video from each camera image | video by the video information processing apparatus of the golf video information automatic generation system by one Example of this invention.

本発明の他の一実施例によるゴルフ映像情報自動生成システムに用いられるゴルフ映像情報自動生成方法について説明するためのフローチャートである。It is a flowchart for demonstrating the golf video information automatic generation method used for the golf video information automatic generation system by other one Example of this invention.

図9に示したフローチャートによるゴルフ映像情報自動生成方法によってそれぞれの撮影ユニット映像から必要な映像を抽出して編集することによってゴルフ映像情報を生成する一例を示した図である。It is the figure which showed an example which produces | generates golf image | video information by extracting and editing a required image | video from each imaging | photography unit image | video by the golf image | video information automatic generation method by the flowchart shown in FIG.

図10で説明した編集映像の一例を時系列的に示した図である。It is the figure which showed an example of the edited image demonstrated in FIG. 10 in time series.

図10で説明した編集映像の一例を時系列的に示した図である。It is the figure which showed an example of the edited image demonstrated in FIG. 10 in time series.

図10で説明した編集映像の一例を時系列的に示した図である。It is the figure which showed an example of the edited image demonstrated in FIG. 10 in time series.

本発明によるゴルフ映像情報自動生成システム及びゴルフ映像情報自動生成方法について図面に基づいてより具体的に説明する。   The golf video information automatic generation system and the golf video information automatic generation method according to the present invention will be described more specifically based on the drawings.

まず、図1及び図2を参照して本発明の一実施例によるゴルフ映像情報自動生成システムについて説明する。   First, a golf video information automatic generation system according to an embodiment of the present invention will be described with reference to FIGS. 1 and 2.

図1及び図2に示したように、本発明の一実施例によるゴルフ映像情報自動生成システムは、ゴルフ場の一ホールの一側に設置される第1撮影ユニット100、該当ホールの反対側に設置される第2撮影ユニット200、及び前記第1撮影ユニット100及び第2撮影ユニット200と連結され、有線又は無線で通信して各撮影ユニットから撮影された映像を受けて映像分析を行う又はその受けた映像から適切な映像を抽出して編集することによって、使用者に提供するゴルフ映像情報を自動で生成する映像情報処理装置500を含んでなることができる。   As shown in FIGS. 1 and 2, a golf video information automatic generation system according to an embodiment of the present invention includes a first photographing unit 100 installed on one side of one hole of a golf course, on the opposite side of the corresponding hole. The second photographing unit 200 installed, and the first photographing unit 100 and the second photographing unit 200 are connected to each other and perform video analysis by receiving images photographed from the respective photographing units through wired or wireless communication. A video information processing apparatus 500 that automatically generates golf video information to be provided to the user by extracting and editing an appropriate video from the received video can be included.

前記第1撮影ユニット100及び第2撮影ユニット200はそれぞれ一つのカメラのみを含むこともでき、二つ以上のカメラを含むこともできる。一つの撮影ユニット100又は200が二つ以上のカメラを含む場合には、各カメラが互いに異なる位置で同じ領域を撮影するように構成されることが好ましい。   Each of the first photographing unit 100 and the second photographing unit 200 may include only one camera, or may include two or more cameras. When one photographing unit 100 or 200 includes two or more cameras, each camera is preferably configured to photograph the same region at different positions.

本発明によるゴルフ映像情報自動生成システム及び方法は、使用者がゴルフショットするときから該当ゴルフショットによるボールが目標地点の近くに到逹して停止するときまでの一連の過程についての映像を全部含むように映像編集を自動で行うから、使用者が一度のゴルフショットでスタート地点から目標地点にボールを送る場合にその活用度が高いと言える。   The system and method for automatically generating golf image information according to the present invention includes all images of a series of processes from when a user makes a golf shot to when the ball by the corresponding golf shot reaches near the target point and stops. Thus, since video editing is performed automatically, it can be said that the degree of utilization is high when the user sends the ball from the start point to the target point in one golf shot.

ここで、前述した目標地点はグリーン上のホールカップとなることもでき、グリーンの周辺のフェアウェイ上の任意の地点となることもできる。   Here, the target point described above can be a hole cup on the green, or an arbitrary point on the fairway around the green.

本発明によるゴルフ映像情報自動生成システムは、使用者がゴルフショットするときから該当ゴルフショットによるボールが目標地点の近くに到逹して停止するときまでの一連の過程についての映像を自動で生成するから、Par3ホールのようにティーボックスでゴルフショットによってボールを直ちにグリーン上に到達させることができる場合に特に適用し易いだけでなくホールインワンなどが可能であるので好ましい。   The golf video information automatic generation system according to the present invention automatically generates a video about a series of processes from when a user makes a golf shot to when the ball by the golf shot reaches a target point and stops. Therefore, it is preferable not only when the ball can immediately reach the green by a golf shot with a tee box like the Par3 hole, but also because it is possible to make a hole-in-one and the like.

図1ではPar3ホールのティーボックスTB領域に前記第1撮影ユニット100が設置され、グリーンGの辺りに前記第2撮影ユニット200が設置される場合を例として示している。   FIG. 1 shows an example in which the first photographing unit 100 is installed in the tea box TB area of the Par3 hole and the second photographing unit 200 is installed around the green G.

そして、図1では第1撮影ユニット100が第1カメラ110及び第2カメラ120を含み、第2撮影ユニット200が第3カメラ210及び第4カメラ220を含む場合を示している。   1 shows a case where the first photographing unit 100 includes the first camera 110 and the second camera 120, and the second photographing unit 200 includes the third camera 210 and the fourth camera 220.

前記第1撮影ユニット100の第1カメラ110はゴルフスイングする使用者の側面を見る画角で映像を撮影するように設置され、第2カメラ120はゴルフスイングする使用者の正面を見る画角で映像を撮影するように設置されることが好ましい。   The first camera 110 of the first photographing unit 100 is installed so as to shoot an image with an angle of view looking at the side of the user who makes a golf swing, and the second camera 120 has an angle of view looking at the front of the user who makes a golf swing. It is preferable to be installed so as to take a picture.

前記第2撮影ユニット200は単一カメラを含むようにしても良いが、図1に示したように、第3カメラ210と第4カメラ220などの2台以上のカメラが設置される場合、各カメラがグリーンGを含む領域を互いに異なる視角で見る画角で映像を撮影するように設置されることが好ましい。   The second photographing unit 200 may include a single camera. However, when two or more cameras such as the third camera 210 and the fourth camera 220 are installed as shown in FIG. It is preferable that the camera is installed so as to shoot a video at an angle of view in which the area including the green G is viewed from different viewing angles.

図1で、HCはグリーンG上のホールカップを指示し、FLはホールカップhcに差し込まれた旗竿を指示する。   In FIG. 1, HC indicates the hole cup on the green G, and FL indicates the flagpole inserted into the hole cup hc.

一方、使用者に提供されるゴルフ映像情報の映像コンテンツをより多様な視角でよりドラマチックな高級映像として生成するためにホールの中間地点の辺りに、図1に示したように、第3撮影ユニット310、320を設置することも可能である。   On the other hand, as shown in FIG. 1, in order to generate the video content of the golf video information provided to the user as a more dramatic high-class video with more various viewing angles, as shown in FIG. It is also possible to install 310, 320.

また、例えば、図1に示したホールがPar4ホール又はPar5ホールの場合には、ティーボックスTBでゴルフショットしたものが直ちにグリーンGに到逹することができず、その中間地点程度に着地することが一般的である。この時、図1に示したように、第3撮影ユニット310、320が前記第2撮影ユニット210、220と類似した機能をすることができる。   In addition, for example, when the hole shown in FIG. 1 is a Par4 hole or a Par5 hole, a golf shot made by the tee box TB cannot reach the green G immediately, and should land at an intermediate point. Is common. At this time, as shown in FIG. 1, the third photographing units 310 and 320 can function similarly to the second photographing units 210 and 220.

すなわち、本発明によるゴルフ映像情報自動生成システムがPar4ホール又はPart5ホールに設置される場合、前記目標地点がグリーン上のホールカップではなくて、例えばフェアウェイ上の目標領域EV上の一地点となり得る。   That is, when the golf video information automatic generation system according to the present invention is installed in the Par4 hole or the Part5 hole, the target point may be a point on the target area EV on the fairway, for example, instead of the hole cup on the green.

したがって、使用者がティーボックスTBでゴルフショットしたものがフェアウェイ上の目標領域EVにいくら近く着地するかを前記第3撮影ユニットの第5カメラ310又は第6カメラ320が撮影した映像から確認することができ(後述する映像内ボールの位置の算出及びトラッキングによって前記目標領域内に着地したか又は中心にいくら近くに着地したかなどの判別及び決定が可能である)、映像情報処理装置500は前記第3撮影ユニットの撮影映像を分析してこれを判別することができ、その結果を使用者に知らせる又はサーバーに伝送して、前記サーバーがその結果を記録しておくことができるようにすることが可能である。   Therefore, it is confirmed from the image taken by the fifth camera 310 or the sixth camera 320 of the third photographing unit how close the golf shot made by the user with the tee box TB lands on the target area EV on the fairway. (It is possible to determine and determine whether it has landed in the target area or how close it is to the center by calculating and tracking the position of the ball in the image, which will be described later). It is possible to analyze and discriminate the photographed video of the third photographing unit and inform the user of the result or transmit it to the server so that the server can record the result. Is possible.

また、前述したように、前記第3撮影ユニットの映像を分析し、ゴルフラウンドする使用者のそれぞれがティーボックスでゴルフショットしたものに対し、フェアウェイに前もって準備しておいた目標領域EVの中心に最も近くに着地した順に順位を決定し、順位によって決定しておいた景品を前記第3撮影ユニットの映像分析結果によって、決定された順位によって支給するようにすることができる。   In addition, as described above, the video of the third shooting unit is analyzed, and each of the golf round users who took golf shots in the tee box is centered on the target area EV prepared in advance on the fairway. It is possible to determine the rank in the order of landing closest, and to give a prize determined according to the rank according to the determined rank according to the video analysis result of the third photographing unit.

また、図1に示したように、目標領域EVを敢えて決定しておいていなくても、通常ゴルフ場でPar4ホール又はPar5ホールで行われるロンゲストゲーム(Longest Game;ゴルフラウンド中の使用者のうちティーショットしたボールがフェアウェイ上で最も遠い飛距離を記録する場合の使用者が優勝するゲーム)の勝者を前記第3撮影ユニットの撮影映像の分析によって(映像内ボールの位置情報を把握することによって)正確に判別することができる。   In addition, as shown in FIG. 1, even if the target area EV is not intentionally determined, a longest game (Longest Game) played in a Par4 hole or a Par5 hole at a normal golf course is performed. Of these, the winner of the game where the tee shot ball records the farthest distance on the fairway is the winner (by grasping the position information of the ball in the video) by analyzing the video shot of the third shooting unit. Can be determined accurately).

前記目標領域内にボールが着地したかに対する判別によってイベントが当選されたか又はロンゲストゲームの勝者であるかなどを前記第3撮影ユニットの撮影映像の分析によって判別又は決定することができ、その当選者又は勝者にはゴルフ場業者が前もって準備しておいた景品を支給する、又は前記第1撮影ユニット及び第3撮影ユニットのそれぞれの撮影映像を用いて映像情報処理装置が映像編集によって自動で生成したゴルフ映像情報を提供することができる(当選者又は勝者であるかを前記映像情報処理装置が判別又は決定するとともに前記自動で生成したゴルフ映像情報を自動で該当使用者のモバイル端末機に伝送するなどの処理が可能である)。   Whether the event has been won by determining whether the ball has landed in the target area or whether the player has won the longest game can be determined or determined by analyzing the shot image of the third shooting unit. The player or winner is provided with a prize prepared in advance by a golf course company, or is automatically generated by the video information processing device by video editing using the respective video shots of the first shooting unit and the third shooting unit. Golf video information can be provided (the video information processing apparatus determines or determines whether it is a winner or a winner and automatically transmits the automatically generated golf video information to the mobile terminal of the user) Can be processed).

ここで、本願の請求項11〜13に記載されているティーボックス撮影ユニット及びフェアウェイ撮影ユニットは、前記第1撮影ユニット及び第3撮影ユニットとそれぞれ同一である。   Here, the tea box photographing unit and the fairway photographing unit described in claims 11 to 13 of the present application are the same as the first photographing unit and the third photographing unit, respectively.

一方、前述したような各撮影ユニットのカメラは、映像情報処理装置500と連結されて互いに通信し、各カメラが取得する映像が前記映像情報処理装置500に伝送されて収集され、前記映像情報処理装置500は各カメラから収集したそれぞれの映像から適切な映像を抽出し、その抽出された映像を互いに結合する又は特定カメラの映像内に他のカメラの映像をサブ映像として挿入するなどの映像編集を行って最終的にゴルフ映像情報を自動で生成するように構成される。   On the other hand, the cameras of the respective photographing units as described above are connected to the video information processing apparatus 500 to communicate with each other, and videos acquired by the cameras are transmitted to the video information processing apparatus 500 and collected. The device 500 extracts appropriate video from each video collected from each camera, and combines the extracted video with each other or inserts video from another camera as a sub video into the video of a specific camera. And the golf video information is finally automatically generated.

前記映像情報処理装置500は、前述したように、ゴルフ映像情報を自動で生成するために各撮影ユニットの各カメラから収集したそれぞれの映像から適切な映像を抽出する。この際、どの区間の映像を抽出することが適切であるかについて前もってプログラムされている情報処理部によって適切な映像を抽出し編集して前記ゴルフ映像情報を生成する。   As described above, the video information processing apparatus 500 extracts an appropriate video from each video collected from each camera of each shooting unit in order to automatically generate golf video information. At this time, the golf video information is generated by extracting and editing an appropriate video by a previously programmed information processing unit as to which segment video is appropriate to be extracted.

すなわち、前記映像情報処理装置500はそれぞれのカメラから収集した映像を分析して適切な映像の抽出区間を決定し、その決定されたものによって適切な映像を抽出する。この事項については後述する。   That is, the video information processing apparatus 500 analyzes video collected from each camera to determine an appropriate video extraction section, and extracts an appropriate video according to the determined video. This matter will be described later.

一方、図2に示したように、映像情報処理装置500は、大別して、格納部510と情報処理部520を含み、前記情報処理部520は、映像管理部521、トリガー処理部522、ボールトラッキング処理部523、ホールカップ位置感知部524及び映像編集部525を含むように構成されることができる。   On the other hand, as shown in FIG. 2, the video information processing apparatus 500 roughly includes a storage unit 510 and an information processing unit 520. The information processing unit 520 includes a video management unit 521, a trigger processing unit 522, and ball tracking. The processing unit 523, the hole cup position sensing unit 524, and the video editing unit 525 may be included.

ここで、前記映像管理部521、トリガー処理部522、ボールトラッキング処理部523、ホールカップ位置感知部524及び映像編集部525などはそれぞれハードウェア又はソフトウェアで具現されることができ、前記情報処理部520が行う各機能を区分して示したものであり得る。   Here, the video management unit 521, the trigger processing unit 522, the ball tracking processing unit 523, the hole cup position sensing unit 524, the video editing unit 525, and the like may be implemented by hardware or software, respectively, Each function performed by 520 may be shown separately.

前記格納部510は各撮影ユニット100、200などの各カメラから収集される映像が格納される部分であり、前記映像管理部521は各撮影ユニット100、200などの各カメラからそれぞれ撮影された映像を収集し、各カメラ別に区分して前記格納部510に格納して管理する。   The storage unit 510 is a part for storing videos collected from the cameras such as the shooting units 100 and 200, and the video management unit 521 is a video shot from the cameras such as the shooting units 100 and 200, respectively. Are collected for each camera and stored in the storage unit 510 for management.

前記トリガー処理部522は前記格納部510に格納された前記第1撮影ユニット100の第1カメラ110又は第2カメラ120の映像に対する映像処理によってボールが打撃によって動くことを感知し、該当映像内でボールが打撃によって動くことを感知すれば、トリガー信号を発生する。   The trigger processing unit 522 detects that the ball is moved by hitting by image processing on the image of the first camera 110 or the second camera 120 of the first photographing unit 100 stored in the storage unit 510, and the trigger processing unit 522 A trigger signal is generated when it senses that the ball is moved by hitting.

前記トリガー処理部522によって'ボールが打撃によって動くことを感知'する方式は、多くのフレームの映像に対して互いに異なる二つのフレーム映像の差映像でボールを検出するアルゴリズムによって各該当映像内でボールを検出することによってボールを感知することが可能になる。これについてのより具体的な説明は後述する。   The trigger processing unit 522 detects the movement of the ball by hitting the ball by using an algorithm that detects a ball from a difference image of two different frame images with respect to a number of frame images. Detecting the ball makes it possible to sense the ball. More specific explanation about this will be described later.

一方、本発明の他の一実施例によるゴルフ映像情報自動生成システムの映像情報処理装置500は、前述したように、映像分析によってトリガー信号を発生するトリガー処理部の代わりに、外部で発生するトリガー信号を受信し、これをトリガー信号として活用することができる。   On the other hand, the video information processing apparatus 500 of the golf video information automatic generation system according to another embodiment of the present invention, as described above, uses an externally generated trigger instead of a trigger processing unit that generates a trigger signal by video analysis. A signal can be received and used as a trigger signal.

すなわち、ゴルフラウンド過程で用いられるゴルフ端末機(MT:通常キャディーが持って通いながらゴルフスコアを入力して管理する端末機でもあり得、各ゴルファーが持って通うゴルフ補助端末機又はスマートフォンのようなモバイル端末機でもあり得る)を用いて一使用者がゴルフショットするときにインパクト時点に合わせて他の使用者が前記ゴルフ端末機(MT)を操作してショット信号を前記映像情報処理装置500に伝送すれば、前記映像情報処理装置500はそのショット信号を受信し、これを前記トリガー信号として用いることができる。これについての具体的な事項も後述する。   That is, a golf terminal used in the course of a golf round (MT: a terminal that inputs and manages a golf score while usually being carried by a caddy, such as a golf auxiliary terminal or a smartphone that each golfer carries) When a user makes a golf shot using a mobile terminal, another user operates the golf terminal (MT) according to the time of impact and sends a shot signal to the video information processing apparatus 500. If transmitted, the video information processing apparatus 500 can receive the shot signal and use it as the trigger signal. Specific matters regarding this will also be described later.

一方、前記ボールトラッキング処理部523は目標地点、すなわちグリーンの辺りに設置された第2撮影ユニット200に含まれるカメラ210又は220の撮影映像に対する映像処理による分析で映像内でボールを検出してボールの位置情報を生成することによってボールをトラッキングする機能を有する部分である。   On the other hand, the ball tracking processing unit 523 detects the ball in the image by analyzing the captured image of the camera 210 or 220 included in the second shooting unit 200 installed around the target point, that is, around the green. This is a part having a function of tracking the ball by generating the position information.

前記ボールトラッキング処理部523は、ボールがグリーン上に着地するなど、目標地点の辺りでボールを持続的にトラッキングすることで、ボールの動きが止まった時点を決定する。   The ball tracking processing unit 523 determines when the movement of the ball has stopped by continuously tracking the ball around the target point, such as when the ball has landed on the green.

そして、前記ボールトラッキング処理部523は、前述したように、映像分析によってボールの位置を持続的にトラッキングしてグリーン上のホールカップの位置とボールの位置を用いてホールインワンであるかを判断することもでき、ボールとホールカップ間の距離を算出することもできる。   Then, as described above, the ball tracking processing unit 523 continuously tracks the position of the ball by video analysis and determines whether it is a hole-in-one by using the position of the hole cup on the green and the position of the ball. The distance between the ball and the hole cup can also be calculated.

一方、前記ホールカップ位置感知部524は、グリーンの辺りに設置された第2撮影ユニット200に含まれるカメラ210又は220の撮影映像に対する映像処理による分析でグリーン上のホールカップ位置を実時間で感知し、ホールカップ位置が変更された場合、その変更されたホールカップ位置情報をアップデートする機能をする。   Meanwhile, the hole cup position sensing unit 524 senses the position of the hole cup on the green in real time by analyzing the captured image of the camera 210 or 220 included in the second photographing unit 200 installed around the green. When the hole cup position is changed, the function of updating the changed hole cup position information is performed.

通常ゴルフ場の各ホールではグリーン上のホールカップの位置が頻繁に変更される。よって、本発明の一実施例によるゴルフ映像情報自動生成システムはグリーン上のホールカップ位置を固定した位置情報として持っているものではなく、システムが動作する都度又は予め設定された周期でホールカップ位置を新しく把握してアップデートする。   Normally, the position of the hole cup on the green is frequently changed in each hole of the golf course. Therefore, the golf video information automatic generation system according to the embodiment of the present invention does not have the position information of the hole cup on the green as fixed position information, but the hole cup position every time the system operates or at a preset cycle. Newly grasp and update.

前記ホールカップ位置感知部524は、グリーンの辺りでグリーンを含む領域を撮影するカメラから収集した映像に対する予め設定された映像処理によってグリーン上のホールカップ位置を直接把握して認識することもでき、ホールカップに差し込まれた旗竿を認識し、その旗竿の下端部位置をホールカップ位置として認識することもできる。   The hole cup position sensing unit 524 can directly recognize and recognize the position of the hole cup on the green by a predetermined image processing for the image collected from the camera that captures the area including the green around the green. It is also possible to recognize the flagpole inserted into the hole cup and recognize the lower end position of the flagpole as the hole cup position.

前記ホールカップ位置感知部524によってグリーン上のホールカップ位置情報が最新情報として維持されることにより、前記ボールトラッキング処理部523によってホールインワンであるか又はニアピンであるかを判断し、ホールカップとボール間の距離算出などを正確に行うことができる。   When the hole cup position sensing unit 524 maintains the hole cup position information on the green as the latest information, the ball tracking processing unit 523 determines whether it is a hole-in-one or a near-pin and determines whether the hole cup is between the ball cup and the ball. The distance can be calculated accurately.

一方、前記映像編集部525は前記映像管理部521によって管理されている各カメラ別映像から最終的に作られるゴルフ映像情報の生成に必要な映像をそれぞれ抽出し、その抽出された映像を互いに結合する又は特定抽出映像をサブ映像として他の抽出映像に挿入するなどの映像編集を行う部分である。   On the other hand, the video editing unit 525 extracts videos necessary for generating golf video information that is finally created from the videos for each camera managed by the video management unit 521, and combines the extracted videos with each other. This is a part for performing video editing such as inserting a specific extracted video as a sub video into another extracted video.

前記映像編集部525は各カメラ別映像に対する映像の抽出区間を決定し、その決定された抽出区間によって各カメラ別映像から必要な映像を抽出し、前記トリガー処理部522によって又は外部のゴルフ端末機によって発生するトリガー信号の時点、第1カメラの映像でボールがそれ以上検出されない時点、打撃されて移動するボールがグリーン上で止まった時点などの情報を用いて前記映像の抽出区間を決定する。これについての具体的な事項も後述する。   The video editing unit 525 determines a video extraction section for each camera-specific video, extracts a necessary video from the camera-specific video according to the determined extraction section, and uses the trigger processing unit 522 or an external golf terminal. The extraction period of the video is determined using information such as the time of the trigger signal generated by the above, the time when no more balls are detected in the video of the first camera, and the time when the ball that is hit and moves stops on the green. Specific matters regarding this will also be described later.

ここで、前記"時点"は時間情報でもあり得、映像のフレーム情報でもあり得る。例えば、'トリガー信号の発生時点'と言えば、トリガー処理部によってトリガー信号が発生したときの時間を意味することもでき、トリガー信号が発生するときの該当映像フレームを意味することもでき、両者を共に意味することもできる。   Here, the “time point” may be time information or video frame information. For example, 'Trigger signal generation time' can mean the time when the trigger signal is generated by the trigger processing unit, or it can mean the corresponding video frame when the trigger signal is generated. Can mean both.

前記'ボールがそれ以上検出されない時点'も同様に映像分析によってボールが検出されないときの時間情報又はボールが検出されないときの該当映像フレームを意味することができ、前記'ボールがグリーン上で止まった時点'もボールトラッキング過程でボールの動きがないときの時間情報又は該当映像フレーム情報を意味することができる。   The 'time when no more balls are detected' can also mean time information when no balls are detected by video analysis or the corresponding video frame when no balls are detected, and the 'ball stopped on the green “Time” may also mean time information or corresponding video frame information when there is no movement of the ball in the ball tracking process.

そして、前記"抽出区間"は時間区間でもあり得、フレーム区間でもあり得る。例えば、トリガー時点からボールがそれ以上検出されない時点までの区間であると言えば、トリガーが発生したときの時間とボールがそれ以上検出されないときの時間の間の時間区間に対応する映像フレームを抽出するという意味でもあり得、トリガーが発生したときの該当映像フレームとボールがそれ以上検出されないときの該当映像フレームの間のフレーム区間に相当する映像フレームを抽出するという意味でもあり得る。   The “extracted section” may be a time section or a frame section. For example, if it is a section from the trigger time to the time when no more balls are detected, video frames corresponding to the time interval between the time when the trigger occurred and the time when no more balls are detected are extracted It may also mean that the video frame corresponding to the frame section between the corresponding video frame when the trigger occurs and the corresponding video frame when no more balls are detected is extracted.

一方、図3を参照して本発明の一実施例によるゴルフ映像情報自動生成システムに用いられるゴルフ映像情報自動生成方法について説明する。   Meanwhile, a golf video information automatic generation method used in a golf video information automatic generation system according to an embodiment of the present invention will be described with reference to FIG.

図3に示したフローチャートでは、ティーボックスでホールインワンが可能なPar3ホールのようなホールにおいてティーボックスTB(図1参照)に第1カメラ110(図1参照)と第2カメラ120(図1参照)が設置され、グリーンGの辺りに第3カメラ210(図1参照)が設置されている場合に映像情報処理装置500(図1参照)によって行われるゴルフ映像情報自動生成方法について示している。   In the flowchart shown in FIG. 3, the first camera 110 (see FIG. 1) and the second camera 120 (see FIG. 1) are placed in a tee box TB (see FIG. 1) in a hole such as a Par3 hole that allows hole-in-one with a tee box. Is shown, and a golf video information automatic generation method performed by the video information processing apparatus 500 (see FIG. 1) when the third camera 210 (see FIG. 1) is installed around the green G is shown.

ここで、前記第1カメラはゴルフスイング姿勢を取る使用者の側面を見る画角で映像を撮影し(ボールの進行方向において後方から映像を撮影)、前記第2カメラはゴルフスイング姿勢を取る使用者の正面を見る画角で映像を撮影する(ボールの進行方向において側方から映像を撮影)。   Here, the first camera takes a picture with an angle of view looking at the side of the user who takes the golf swing posture (takes a picture from the rear in the ball traveling direction), and the second camera takes the golf swing posture. An image is taken at an angle of view in front of the person (taken from the side in the direction of ball movement).

システムが動作し始めれば、ティーボックスの辺りに設置された第1カメラ及び第2カメラがそれぞれ映像撮影を始め(S10)、映像管理部521(図2参照)は前記第1カメラ及び第2カメラのそれぞれから撮影された映像を収集して格納部510(図2参照)に格納する(S12)。   When the system starts to operate, the first camera and the second camera installed around the tee box start to shoot images (S10), respectively, and the image management unit 521 (see FIG. 2) displays the first camera and the second camera. Are collected and stored in the storage unit 510 (see FIG. 2) (S12).

使用者がティーボックスでゴルフショットしてボールを打撃すれば、トリガー処理部522(図2参照)によってトリガー信号が発生する又は外部のゴルフ端末機などからトリガー信号を受信する(S20)。   When the user hits a ball by hitting a golf ball with a tee box, a trigger signal is generated by the trigger processing unit 522 (see FIG. 2) or a trigger signal is received from an external golf terminal (S20).

前述したように、トリガー信号が発生すれば、グリーンの辺りに設置された第3カメラは映像撮影を始め(S22)、映像管理部は第3カメラからも撮影映像を収集して格納部に格納する。   As described above, when the trigger signal is generated, the third camera installed around the green starts shooting the video (S22), and the video management unit collects the video shot from the third camera and stores it in the storage unit. To do.

そして、前述したように、トリガー信号が発生すると、映像編集部525(図2参照)はトリガー時点を決定する(S24)。   As described above, when the trigger signal is generated, the video editing unit 525 (see FIG. 2) determines the trigger time (S24).

一方、トリガー処理部は格納部に格納された第1カメラの撮影映像に対して差映像及びボール検出方法などを適用して映像内で動いているボールを検出する(S30)。   On the other hand, the trigger processing unit applies a difference image and a ball detection method to the captured image of the first camera stored in the storage unit to detect a moving ball in the image (S30).

前記第1カメラの撮影映像はティーボックスの後方からボールの進行方向に見る画角で撮影される映像であるので、ボールがいくらか遠く飛べば映像内でそれ以上ボールを検出することができなくなる(S40)。この時、映像編集部は、前記第1カメラの撮影映像でボールがそれ以上検出されない時点、つまり第1カメラ映像でボールがなくなった時点を決定する(S42)。   Since the image captured by the first camera is an image captured at an angle of view seen from the back of the tee box in the direction of ball movement, if the ball flies somewhat far away, no more balls can be detected in the image ( S40). At this time, the video editing unit determines when no more balls are detected in the video image taken by the first camera, that is, when there are no more balls in the first camera video (S42).

もしくは、前記映像編集部は、前記トリガー時点から予め設定された時間が経過すれば(S40)、その予め設定された時間が経過した時点をボールがなくなった時点として決定する(S42)。   Alternatively, when the preset time has elapsed from the trigger time (S40), the video editing unit determines the time when the preset time has passed as the time when the ball has run out (S42).

前述したように、第1カメラの映像でボールがなくなったと判断される場合、映像管理部は第1カメラ撮影映像の収集を終了する(S44)(第1カメラも撮影を終了する)。   As described above, when it is determined that there is no ball in the video of the first camera, the video management unit ends collection of the first camera shooting video (S44) (the first camera also ends shooting).

そして、映像情報処理装置のボールトラッキング処理部523(図2参照)は、グリーン領域を撮影している第3カメラの撮影映像に対して差映像及びボール検出方法などを適用してボールを検出することによってボールの位置をトラッキングする(S50)。   Then, the ball tracking processing unit 523 (see FIG. 2) of the video information processing apparatus detects the ball by applying the difference video and the ball detection method to the video shot by the third camera shooting the green area. Thus, the position of the ball is tracked (S50).

ボールトラッキング処理部によってボールトラッキングが進んでからボールがそれ以上動かない場合、例えばボールがグリーン上で転がってから停止した場合(S60)、前記映像編集部はボールがグリーン上で停止した時点を決定する(S64)。   If the ball does not move any further after the ball tracking processing unit advances, for example, if the ball stops after rolling on the green (S60), the video editing unit determines when the ball stops on the green. (S64).

そして、前述したように、第3カメラの映像でボールが停止したと判断した場合、映像管理部は第3カメラ撮影映像の収集を終了する(S62)(第3カメラも撮影を終了する)。   As described above, when it is determined that the ball has stopped on the video of the third camera, the video management unit ends collection of the video shot by the third camera (S62) (the third camera also ends shooting).

この時、ボールトラッキング処理部はホールカップの位置を前もって知っているとともに映像分析によってボールの位置情報も知っているので、ホールカップの位置とボールの位置情報を用いてホールインワンであるかを判断することができる(S70)。   At this time, since the ball tracking processing unit knows the position of the hole cup in advance and also knows the position information of the ball through video analysis, it determines whether it is a hole-in-one using the position of the hole cup and the position information of the ball. (S70).

仮に、ホールインワンが発生した場合、映像編集部は最終的に生成されるゴルフ映像情報に前もって用意しておいたホールインワン祝いのコンテンツを挿入するようにする(S72)。   If a hole-in-one occurs, the video editing unit inserts a hole-in-one celebration content prepared in advance into the finally generated golf video information (S72).

仮に、ホールインワンではない場合、ボールトラッキング処理部はホールカップとボール間の距離を算出し(S80)、映像編集部は最終的に生成されるゴルフ映像情報に前記算出されたホールカップとボール間の距離情報を表示する(S82)。   If it is not hole-in-one, the ball tracking processing unit calculates the distance between the hole cup and the ball (S80), and the video editing unit finally calculates the distance between the calculated hole cup and the ball in the generated golf video information. The distance information is displayed (S82).

一方、映像編集部は、前記S24段階で決定したトリガー時点、S42段階で決定した第1カメラ映像でボールがなくなった時点、及びS64段階で決定したボールがグリーン上で停止した時点を用いて、前記決定された各時点を基準に前記格納部に格納された各カメラ映像からそれぞれ映像を抽出し、その抽出された映像に対して予め設定された事項による編集を行い、必要な場合、前記S72段階のホールインワン祝いのコンテンツ又は前記S82段階の距離情報表示などを挿入することによって最終的にゴルフ映像情報を生成する(S100)。   On the other hand, the video editing unit uses the trigger time determined in step S24, the time when the ball disappears in the first camera image determined in step S42, and the time when the ball determined in step S64 stops on the green. A video is extracted from each camera video stored in the storage unit on the basis of each determined time point, and the extracted video is edited according to preset matters. The golf video information is finally generated by inserting the stage hole-in-one celebration content or the distance information display of step S82 (S100).

図3に示したフローチャートによるゴルフ映像情報の自動生成に関連した具体的な例を図4〜図8を参照して説明する。   A specific example related to automatic generation of golf video information according to the flowchart shown in FIG. 3 will be described with reference to FIGS.

図4は前記第1カメラによって撮影された映像101の一例を示すもので、該当映像で映像処理をする方法を説明するための図である。   FIG. 4 shows an example of the video 101 taken by the first camera, and is a diagram for explaining a method of performing video processing on the corresponding video.

第1カメラによって撮影された映像によって前記トリガー時点の決定及びボールがなくなった時点の決定を行う必要があり、これは第1カメラによって撮影された映像に対する所定の映像処理による分析によってなされる。   It is necessary to determine the trigger time and the time when the ball has run out based on the video imaged by the first camera, and this is performed by analyzing the video imaged by the first camera by predetermined video processing.

映像処理による分析を容易に行うために、図4に示したように、ティーボックスにいつも用意されているティーマーカー1及び2を用いて該当映像内でティーマーカー1及び2を認識し、その認識されたティーマーカー1及び2を含む関心領域ROIを設定し、第1カメラの撮影映像の毎フレームごとに前記関心領域ROIに対応する部分を抽出することによって映像処理に前記抽出された関心領域ROI部分を用いることができる。   In order to facilitate analysis by video processing, as shown in FIG. 4, the tee markers 1 and 2 are always recognized in the corresponding video using the tee markers 1 and 2 that are always prepared in the tee box, and the recognition is performed. The region of interest ROI including the tee markers 1 and 2 is set, and the extracted region of interest ROI is used for video processing by extracting a portion corresponding to the region of interest ROI for each frame of the image captured by the first camera. Part can be used.

最初に、前述したように関心領域ROIが設定されれば、ゴルフショットが進むうちには第1カメラの全てのフレームの映像から前記設定された関心領域ROIのみを抽出して分析することによってトリガー又はボールの消滅などを易しく判断することができる。   First, if the region of interest ROI is set as described above, it is triggered by extracting and analyzing only the set region of interest ROI from the images of all frames of the first camera as the golf shot progresses. Alternatively, it is possible to easily determine the disappearance of the ball.

一方、図5の(a)〜(f)は前記第1カメラによって撮影されたn番目フレームからn+5番目フレームの映像を時系列的に示したもので、それぞれの映像内でボールを検出したものについて示している(ここで、nは任意の自然数)。   On the other hand, (a) to (f) of FIG. 5 show the images of the n + 5th frame from the nth frame taken by the first camera in time series, and the ball is detected in each image. (Where n is an arbitrary natural number).

図5の(a)はn番目フレーム映像を、(b)はn+1番目フレーム映像を、(c)はn+2番目フレーム映像を、(d)はn+3番目フレーム映像を、(e)はn+4番目フレーム映像を、そして(f)はn+5番目フレーム映像をそれぞれ示し、各フレーム映像内でb1、b2、b3、b4、b5及びb6が指示するように動くボールを検出することができる。   5A shows an nth frame image, FIG. 5B shows an n + 1th frame image, FIG. 5C shows an n + 2th frame image, FIG. 5D shows an n + 3rd frame image, and FIG. 5E shows an n + 4th frame. The image and (f) show the n + 5th frame image, respectively, and it is possible to detect the moving ball as indicated by b1, b2, b3, b4, b5 and b6 in each frame image.

このようなボール検出は差映像及びボール検出方法によって行うことができる。例えば、n番目フレーム映像とn+1番目フレーム映像の差映像とこれに対する正規化などの所定のイメージ前処理を受ければ、映像内で動きがある部分のみ残ることになり、その中にはボールも含まれる。   Such ball detection can be performed by a difference image and a ball detection method. For example, if a predetermined image preprocessing such as a difference image between the nth frame image and the (n + 1) th frame image and normalization thereof is performed, only a portion with motion is left in the image, including a ball. It is.

ボールの大きさ、縦横比、直進性などについての事項を前もって設定しておき、その予め設定された事項によって、差映像によって生成された映像から不要な部分を除去する方式でボールを検出することができる。   The ball size, aspect ratio, straightness, etc. are set in advance, and the ball is detected by a method that removes unnecessary parts from the video generated by the difference video according to the preset items. Can do.

例えば、差映像から、動く部分である使用者の頭部や胴体、脚部など、そしてゴルフクラブ部及びボール部が検出される。使用者の頭部や胴体、脚部などは予め設定されたボールの大きさ情報や縦横比情報によって容易に除去することができ、ゴルフクラブ部の場合にも曲線軌道に沿って動くしかないから直進性について予め設定された事項によって容易に除去することができるので、このような方式で不要な部分が全部除去されることによって、ボールを容易に検出することができる。   For example, the user's head, body, legs, etc., as well as a golf club part and a ball part, which are moving parts, are detected from the difference image. The user's head, torso, leg, etc. can be easily removed with the ball size information and aspect ratio information set in advance, and in the case of a golf club part, it can only move along a curved track. Since the straightness can be easily removed according to a preset item, the ball can be easily detected by removing all unnecessary portions by such a method.

前述したようなボール検出方法によって、図5の(a)〜(f)にそれぞれ示した各フレーム映像上で検出されたボールを表示したものがb1〜b6である。   Reference numerals b1 to b6 indicate balls detected on the respective frame images shown in FIGS. 5A to 5F by the ball detection method as described above.

本発明によるシステムの映像情報処理装置のトリガー処理部が前記ボール検出方法によって最初にボールを検出するときの時点が直ちにトリガー時点となるものである。   The time point when the trigger processing unit of the video information processing apparatus of the system according to the present invention first detects a ball by the ball detection method immediately becomes the trigger time point.

図5の(a)に示した第1カメラ映像のn番目フレーム映像でボールb1が検出されることによってn番目フレームをトリガー時点と決定する又はn番目フレーム映像でボールを検出した時間をトリガー時点と決定することができる。   When the ball b1 is detected in the nth frame image of the first camera image shown in FIG. 5A, the nth frame is determined as the trigger time, or the time when the ball is detected in the nth frame image is the trigger time. Can be determined.

仮に、トリガー処理部の代わりに外部のトリガー信号を受信することによってトリガー時点を決定する場合には、他の使用者又はキャディーがゴルフ端末機を操作してトリガー信号を発生した時点(該当時間又は該当時間でのフレーム)がトリガー時点となる。   If the trigger time is determined by receiving an external trigger signal instead of the trigger processing unit, when the other user or caddy operates the golf terminal and generates the trigger signal (corresponding time or The frame at the corresponding time) is the trigger time.

トリガー処理部の映像処理によるトリガー信号発生時点と外部からトリガー信号を受信することによって決定されるトリガー時点は違うことがあり、必ずしも使用者のゴルフスイングによってゴルフクラブのヘッドがボールにインパクトされるときをトリガー時点と決定する必要はない。適切な時点をトリガー時点としてその時点前後の予め設定された区間だけの映像を抽出して編集するため、インパクト時点がトリガー時点とならなくても適切なゴルフ映像情報の生成が可能であるからである。   When the trigger signal is generated by the video processing of the trigger processing unit and the trigger time determined by receiving the trigger signal from the outside may be different, the golf club head is not always impacted by the golf swing of the user Need not be determined as the trigger time. Because the video is extracted and edited only for a preset section before and after the trigger time as the trigger time, appropriate golf video information can be generated even if the impact time does not become the trigger time. is there.

一方、図6の(a)〜(f)は前記第1カメラによって撮影されたm番目フレームからm+5番目フレームの映像を時系列的に示したもので、それぞれの映像内でボールを検出したものについて示している(ここで、mは任意の自然数、mはnより大きい)。   On the other hand, (a) to (f) of FIG. 6 show images of the m + 5th frame from the mth frame taken by the first camera in time series, and the ball is detected in each image. Where m is an arbitrary natural number and m is greater than n.

図6の(a)はm番目フレーム映像を、(b)はm+1番目フレーム映像を、(c)はm+2番目フレーム映像を、(d)はm+3番目フレーム映像を、(e)はm+4番目フレーム映像を、そして(f)はm+5番目フレーム映像をそれぞれ示し、各フレーム映像内でB1、B2、B3、B4及びB5が指示するように動くボールを検出することができる(図6で、m+5番目フレーム映像ではボールが検出されなかった)。   6A shows an m-th frame image, FIG. 6B shows an m + 1-th frame image, FIG. 6C shows an m + 2-th frame image, FIG. 6D shows an m + 3-th frame image, and FIG. 6E shows an m + 4-th frame. (F) shows the m + 5th frame image, and it is possible to detect a moving ball as indicated by B1, B2, B3, B4 and B5 in each frame image (in FIG. 6, m + 5th). The ball was not detected in the frame image).

ここで、ボールを検出する方式は先に図5で説明したようである。   Here, the method of detecting the ball is as described above with reference to FIG.

このように、トリガー信号発生以後にもトリガー処理部は第1カメラの映像をフレームごとに分析してボールを検出するが、m+5番目フレーム映像でボールが検出されなかったので、すなわち映像内でボールがなくなったと判断することができるので、該当フレームをボールがなくなった時点又は映像でボールが検出されなかったときの時間をボールがなくなった時点と決定することができる。   As described above, even after the trigger signal is generated, the trigger processing unit analyzes the image of the first camera for each frame and detects the ball. However, since the ball is not detected in the m + 5th frame image, that is, the ball in the image. Therefore, it is possible to determine that the corresponding frame is the time when the ball is exhausted or the time when the ball is not detected in the video is the time when the ball is exhausted.

一方、図7は前記第3カメラによって撮影された映像201の一例を示すもので、該当映像でホールカップとボール間の距離表示など、グリーン上で使用者に提供可能なゴルフ情報が表示された例を示している。   On the other hand, FIG. 7 shows an example of an image 201 taken by the third camera, and golf information that can be provided to the user on the green, such as a display of the distance between the hole cup and the ball, is displayed on the corresponding image. An example is shown.

図7に例示された第3カメラの映像によって、本発明の映像情報処理装置のボールトラッキング処理部は該当映像内でボールbaを検出(ボール検出方法は前述したようである)して毎フレーム映像ごとにボールの位置情報を算出することによってボールの位置を追跡する。   From the video of the third camera illustrated in FIG. 7, the ball tracking processing unit of the video information processing apparatus of the present invention detects the ball ba in the corresponding video (the ball detection method is as described above), and the video for each frame. Each time the position of the ball is tracked by calculating the position information of the ball.

毎フレームごとにボールbaの位置情報を算出することができるので、最終的に生成されるゴルフ映像情報に、図7に示したように、ボールの軌跡trを表示することも可能である。   Since the position information of the ball ba can be calculated for each frame, the ball trajectory tr can be displayed in the finally generated golf video information as shown in FIG.

また、本発明の映像情報処理装置のホールカップ位置感知部524(図2参照)は映像201内でグリーンg上のホールカップhcを直接捜す又はホールカップに差し込まれた旗竿flを捜してホールカップ位置を算出することができる。   In addition, the hole cup position sensing unit 524 (see FIG. 2) of the video information processing apparatus according to the present invention directly searches for the hole cup hc on the green g in the video 201 or the flag cup fl inserted in the hole cup. The position can be calculated.

ホールカップhc又は旗竿flはグリーンGと明らかに区別される色相を有するので、第3カメラの映像をHSV映像に変換し、その変換映像に対するカラー分析によってホールカップ又は旗竿を捜すことができる。   Since the hole cup hc or the flagpole fl has a hue that is clearly distinguished from the green G, the image of the third camera can be converted into an HSV image, and the hole cup or flagpole can be searched for by color analysis on the converted image.

旗竿を捜す場合、映像内で旗竿のカラー分布によって、旗竿が立てられているか又は横になっているかを判断することができ、旗竿が横になっている場合にはホールカップ位置を感知しなく、旗竿が立てられている場合にその旗竿の下端部をホールカップ位置と特定することができる。   When searching for a flagpole, the color distribution of the flagpole can be determined in the video to determine whether the flagpole is standing or lying down. If the flagpole is lying down, the position of the hole cup is not detected. When the flag pole is set up, the lower end of the flag pole can be specified as the hole cup position.

前記ボールトラッキング処理部は映像内ボール検出方法によってボールの位置情報を知っているとともにホールカップ位置感知部によって把握されたホールカップの位置も知っているので、ホールカップの位置情報とボールの位置情報を用いてボールbaがホールカップhcにホールインされるかを判断することができるのはもちろんのこと、ボールbaが停止した場合にホールカップhcとボールba間の距離も計算することができる。   Since the ball tracking processing unit knows the position information of the ball by the ball detection method in the image and the position of the hole cup grasped by the hole cup position sensing unit, the position information of the hole cup and the position information of the ball It is possible to determine whether or not the ball ba is holed into the hole cup hc by using, and when the ball ba stops, the distance between the hole cup hc and the ball ba can also be calculated.

本発明の映像情報処理装置の映像編集部は、前述したようにボールがホールカップにホールインされる場合、すなわちホールインワンの場合、前もって用意したホールインワン祝いのコンテンツをゴルフ映像情報に挿入して表示することができ、図7に示したように、ボールbaとホールカップhc間の距離が算出された場合、その算出された距離情報をゴルフ映像情報に表示することができる。   As described above, the video editing unit of the video information processing apparatus of the present invention inserts and displays the previously prepared hole-in-one celebration content in the golf video information when the ball is holed in the hole cup, that is, in the case of hole-in-one. As shown in FIG. 7, when the distance between the ball ba and the hole cup hc is calculated, the calculated distance information can be displayed on the golf video information.

また、図7に示したように、把握されたホールカップ位置を中心に同心円Raのような仮想オブジェクトを表示することで、ボールbaがホールカップhcにどの位近接したかを視角的に表示するコンテンツの挿入も可能である。   In addition, as shown in FIG. 7, by displaying a virtual object such as a concentric circle Ra around the grasped hole cup position, it is possible to visually display how close the ball ba is to the hole cup hc. Content can also be inserted.

一方、図8では映像編集部によってそれぞれのカメラ映像から必要な映像を抽出して編集することによってゴルフ映像情報を生成する一例を示している。   On the other hand, FIG. 8 shows an example in which golf video information is generated by extracting and editing necessary video from each camera video by the video editing unit.

図8で、IM−1は第1カメラの撮影映像であって、映像管理部によって収集されて格納部に格納された映像を示し、IM−2は第2カメラの撮影映像であって、映像管理部によって収集されて格納部に格納された映像を示し、IM−3は第3カメラの撮影映像であって、映像管理部によって収集されて格納部に格納された映像を示し、IM−Gはそれぞれの映像から抽出された映像が編集された映像を示す。   In FIG. 8, IM-1 is a captured image of the first camera, which is an image collected by the image management unit and stored in the storage unit, and IM-2 is a captured image of the second camera, IM-3 indicates a video collected by the management unit and stored in the storage unit, and IM-3 is a captured video of the third camera, indicates a video collected by the video management unit and stored in the storage unit, and IM-G Indicates a video obtained by editing a video extracted from each video.

それぞれの映像IM−1、IM−2、IM−3からゴルフ映像情報を生成するために必要な映像を抽出するためには、トリガー時点(図3のS24段階参照)、ボールがなくなった時点(図3のS42段階参照)及びボールが停止した時点(図3のS64段階参照)がそれぞれ決定されることが好ましい。ここで、トリガー時点はT1、ボールがなくなった時点はT2、そしてボールが停止した時点はT3と言う。   In order to extract images necessary for generating golf image information from the respective images IM-1, IM-2, and IM-3, the trigger time (see step S24 in FIG. 3), the time when the ball runs out ( It is preferable to determine the time point (see step S42 in FIG. 3) and the time point when the ball stops (see step S64 in FIG. 3). Here, the trigger time is T1, the time when the ball runs out is T2, and the time when the ball stops is T3.

前記それぞれの時点のうち、トリガー時点T1は必ず決定される必要があり、ボールがなくなった時点T2及びボールが停止した時点T3は必ずしも決定される必要がなく、前記トリガー時点からの時間区間又はフレーム区間を前もって設定してトリガー時点後に予め設定された時間又はフレーム区間に対応する映像を抽出する方式でそれぞれの映像IM−1、IM−2、IM−3からゴルフ映像情報を生成するために必要な映像を抽出することが可能である。   Of the respective time points, the trigger time point T1 must be determined, and the time point T2 when the ball runs out and the time point T3 when the ball stops are not necessarily determined, and the time interval or frame from the trigger time point is not necessarily determined. Necessary in order to generate golf video information from each video IM-1, IM-2, IM-3 in a manner in which a segment is set in advance and a video corresponding to a preset time or frame interval is extracted after the trigger time It is possible to extract an image.

しかし、ゴルファーごとに飛距離も違い、打撃されたボールが岩にぶつかってグリーン上にさらに飛び上がるなどのさまざまな突発変数のため、固定された映像抽出区間ではボールの適切な映像を生成しにくいということを考慮すれば、映像分析によってそれぞれの時点を決定し、その決定された時点によって映像抽出区間を決定することがボールの適切な映像を生成するのにもっと有利であり得る。以下では、それぞれの決定された時点によって映像抽出区間が決定される場合について説明する。   However, it is difficult to generate an appropriate video of the ball in the fixed video extraction section due to various sudden variables such as the distance that each golfer varies, and the hit ball hits a rock and jumps further onto the green. In view of this, it may be more advantageous to generate an appropriate image of the ball by determining each time point by video analysis and determining the video extraction interval according to the determined time point. Below, the case where a video extraction area is determined by each determined time point is demonstrated.

図8に示したように、第1カメラの映像の分析によってトリガー時点T1とボールがなくなった時点T2が決定されれば、第1カメラの映像IM−1からトリガー時点T1以前の予め設定された区間S1−1に対応する映像とトリガー時点T1からボールがなくなった時点T2までの区間S1−2に対応する映像を抽出することができる。   As shown in FIG. 8, if the trigger time T1 and the time T2 when the ball runs out are determined by analyzing the video of the first camera, the video IM-1 of the first camera is set in advance before the trigger time T1. The video corresponding to the section S1-1 and the video corresponding to the section S1-2 from the trigger time T1 to the time T2 when the ball is lost can be extracted.

もちろん、ボールがなくなった時点T2を別に判断しない場合には、トリガー時点T1から予め設定された区間を前記S1−2区間として抽出することができる。ボールがなくなった時点T2が決定された場合にも前記S1−2区間をT1〜T2の区間にする必要はなく、T1からT2時点より少し前の時点又は少し後の時点までの区間をS1−2区間と決定して抽出することができる。   Of course, if the time T2 at which the ball runs out is not determined separately, a section set in advance from the trigger time T1 can be extracted as the S1-2 section. Even when the time point T2 at which the ball runs out is determined, the S1-2 interval does not need to be the interval T1 to T2, and the interval from the time point T1 to a time point slightly before or slightly later than the time point T2 is defined as S1-. Two sections can be determined and extracted.

IM−1映像で、S1−1区間及びS1−2区間に対応して抽出される映像をE1という。   In the IM-1 video, the video extracted corresponding to the S1-1 section and the S1-2 section is referred to as E1.

一方、第2カメラの映像から抽出される映像は編集されるゴルフ映像をどのコンテンツで構成するかによって多様に決定されることができる。第2カメラの映像は使用者を正面から見る画角で撮影した映像なので、第1カメラの映像又は第3カメラの映像にサブ映像として挿入することで、ゴルフボールが打撃されて飛ぶ状況で使用者の表情を一緒に映像に含ませるための目的で抽出するものであり得る。   On the other hand, the video extracted from the video of the second camera can be variously determined depending on which content constitutes the edited golf video. Since the image of the second camera is an image taken at the angle of view of the user from the front, it can be used in situations where the golf ball is hit by flying as a sub image in the image of the first camera or the image of the third camera. It is possible to extract a person's facial expression for the purpose of being included in the video together.

したがって、図8で、第2カメラの映像IM−2に対してトリガー時点T1から予め設定された区間S2に対応する映像を抽出することができ、第2カメラの映像IM−2からS2区間の抽出された映像をE2と言う。   Therefore, in FIG. 8, it is possible to extract the video corresponding to the preset section S2 from the trigger time T1 with respect to the video IM-2 of the second camera, and from the video IM-2 of the second camera to the S2 section. The extracted video is called E2.

一方、図8に示したように、第3カメラの映像に対する分析によってボールが停止した時点T3が決定されれば、第3カメラの映像IM−3からボールがなくなった時点T2からボールが停止した時点T3までの区間S3を抽出することができる。   On the other hand, as shown in FIG. 8, if the time point T3 when the ball stops is determined by analyzing the video of the third camera, the ball stops from the time T2 when the ball disappears from the video IM-3 of the third camera. A section S3 up to time T3 can be extracted.

もちろん、ボールが停止した時点T3を別に判断しない場合には、トリガー時点T1から予め設定された区間又はボールがなくなった時点T2から予め設定された区間を前記S3区間として抽出することができる。   Of course, when the time T3 when the ball stops is not determined separately, a section preset from the trigger time T1 or a section preset from the time T2 when the ball runs out can be extracted as the S3 section.

第3カメラの映像IM−3からS3区間の抽出された映像をE3という。   The video extracted in the S3 section from the video IM-3 of the third camera is referred to as E3.

前述したように、第1カメラ映像IM−1、第2カメラ映像IM−2及び第3カメラ映像IM−3からそれぞれE1、E2及びE3の映像が抽出されれば、これを用いて編集映像IM−Gを作ることができる。   As described above, if the images E1, E2, and E3 are extracted from the first camera image IM-1, the second camera image IM-2, and the third camera image IM-3, respectively, the edited image IM is used. -G can be made.

すなわち、図8に示したように、E1映像とE3映像を結合し、その結合された映像にE2映像をサブ映像として挿入する方式で映像編集を行うことができる。   That is, as shown in FIG. 8, video editing can be performed by combining the E1 video and the E3 video, and inserting the E2 video as a sub video into the combined video.

サブ映像の場合、オリジナル映像から特定部分、例えば使用者の上体部又は顔部のみ抽出して用いることもでき、使用者の拡大映像を用いることもできる。   In the case of a sub video, only a specific part, for example, the user's upper body or face, can be extracted from the original video, and an enlarged video of the user can be used.

本発明の一実施例によるゴルフ映像情報自動生成システムは、前記E1、E2及びE3映像を編集した映像に、図7で説明したようなボールの軌跡trの表示、グリーン上の同心円Raの表示、ホールカップとボール間の距離の表示、ホールインワンなどに対する祝いコンテンツの表示などを挿入する又は'Nice Shot!'、'Nearest Winner!'などコメントの表示などを挿入することによって最終的なゴルフ映像情報を自動で生成することができる。   In the golf video information automatic generation system according to an embodiment of the present invention, an image obtained by editing the E1, E2, and E3 images is displayed with the display of the trajectory tr of the ball as described in FIG. 7, the display of the concentric circle Ra on the green, Insert the display of the distance between the hole cup and the ball, the display of congratulatory content for hole-in-one, etc. or 'Nice Shot! ',' Nearest Winner! The final golf video information can be automatically generated by inserting a comment display or the like.

最終的にゴルフ映像情報の生成が完了すれば、映像情報処理装置500(図1参照)はゴルフ場の運営サーバー又は別個のサーバーに前記生成の完了したゴルフ映像情報を伝送してサーバーで格納管理するようにすることができ、使用者はPC又はモバイル端末機を用いてサーバーに接続して該当ゴルフ映像情報をダウンロードすることによって自らの記念的なゴルフショットについてのゴルフ映像情報を受けることができる。   When the generation of the golf video information is finally completed, the video information processing apparatus 500 (see FIG. 1) transmits the generated golf video information to a golf course management server or a separate server and stores and manages it in the server. The user can receive golf video information about his commemorative golf shot by connecting to the server using a PC or a mobile terminal and downloading the corresponding golf video information. .

一方、図3〜図8ではティーボックスに第1カメラ及び第2カメラが設置され、グリーン地域に第3カメラが設置され、それぞれから映像を収集してゴルフ映像情報を生成する場合について説明している。本発明によるゴルフ映像情報自動生成システム及び方法はこの場合に限定されず、2台のカメラを用いる場合はもちろんのこと、4台以上のカメラを用いる場合まで多様に具現可能である。   On the other hand, FIGS. 3 to 8 illustrate the case where the first camera and the second camera are installed in the tee box, the third camera is installed in the green area, and the golf video information is generated by collecting videos from each. Yes. The system and method for automatically generating golf video information according to the present invention are not limited to this case, and can be variously implemented not only when two cameras are used, but also when four or more cameras are used.

例えば、ティーボックスに第1カメラが設置され、グリーン地域に第3カメラのみ設置された場合には、図8で第2カメラの映像IM−2及びそれから抽出された映像E2に関する部分を除き、E1映像とE3映像を用いてゴルフ映像情報を生成することができる。   For example, when the first camera is installed in the tee box and only the third camera is installed in the green area, except for the portion related to the video IM-2 of the second camera and the video E2 extracted from it in FIG. Golf video information can be generated using the video and the E3 video.

また、例えば、ティーボックスに第1カメラ及び第2カメラが設置され、グリーン地域に第3カメラ及び第4カメラが設置された場合には(図1参照)、図8で第4カメラの映像からT1、T2及びT3の少なくとも一つの時点を基準に映像抽出区間を決定し、その決定された区間によって映像を抽出して、編集される映像上にサブ映像として挿入する又はE3映像に結合する方式で編集することができる(第4カメラの映像は第3カメラとは違う視角でグリーン領域を撮影しているので、第3カメラの映像と第4カメラの映像のそれぞれ適切な区間で映像を抽出して互いに結合することができ、第4カメラの映像がホールカップの辺りを拡大して撮影する映像となるようにしてE3映像上にサブ映像として挿入して処理することもできる)。   Further, for example, when the first camera and the second camera are installed in the tea box and the third camera and the fourth camera are installed in the green area (see FIG. 1), the image of the fourth camera in FIG. A method of determining a video extraction section based on at least one time point of T1, T2, and T3, extracting a video from the determined section, and inserting it as a sub-video on the edited video or combining it with an E3 video (The video from the 4th camera is filmed in the green area at a different viewing angle from the 3rd camera, so the video is extracted at appropriate intervals between the 3rd camera video and the 4th camera video. And can be inserted into the E3 video as a sub video and processed so that the video of the fourth camera becomes a video shot by enlarging the area around the hole cup)

また、例えば、ティーボックスとグリーンの間に第3撮影ユニット(第5カメラ及び第6カメラ、図1参照)が設置された場合には、適切な区間で第3撮影ユニットの映像から映像を抽出して、図8でE1映像とE3映像の間に適切に結合させる又は挿入する方式で映像編集を行うことができる。   Also, for example, when the third shooting unit (fifth camera and sixth camera, see FIG. 1) is installed between the tea box and green, the video is extracted from the video of the third shooting unit in an appropriate section. Thus, the video editing can be performed by appropriately combining or inserting between the E1 video and the E3 video in FIG.

一方、図9〜図13を参照して本発明のさらに他の一実施例によるゴルフ映像情報自動生成システム及びこれに用いられるゴルフ映像情報自動生成方法について説明する。   Meanwhile, a golf video information automatic generation system and a golf video information automatic generation method used therefor according to another embodiment of the present invention will be described with reference to FIGS.

本発明のさらに他の一実施例によるゴルフ映像情報自動生成システムは、ゴルフ場の特定ホールの一側に設置される第1撮影ユニットと他側に設置される第2撮影ユニット、及び前記第1撮影ユニット及び第2撮影ユニットと連結される映像情報処理装置を含んでなる。本実施例においても、前記映像情報処理装置の構成及び機能は実質的に同様に適用することができる。   According to another embodiment of the present invention, a golf image information automatic generation system includes a first shooting unit installed on one side of a specific hole of a golf course, a second shooting unit installed on the other side, and the first A video information processing apparatus connected to the imaging unit and the second imaging unit is included. Also in this embodiment, the configuration and function of the video information processing apparatus can be applied in substantially the same manner.

ここで、前記第1撮影ユニットは図1に示した第1カメラによって具現されることもでき、第2カメラによって具現されることもでき、必ずしもティーボックスに設置されなければならないものではなく、ティーボックスと多少離れた距離に設置されることもできる。   Here, the first photographing unit may be realized by the first camera shown in FIG. 1 or may be realized by the second camera, and is not necessarily installed in the tee box. It can be installed at some distance from the box.

前記第2撮影ユニットは図1に示した第3カメラによって具現されることもでき、第4カメラによって具現されることもでき、必ずグリーン周辺に設置されなければならないものではなく、グリーンと多少離れた距離に設置されることもできる。   The second photographing unit may be realized by the third camera shown in FIG. 1 or may be realized by the fourth camera. The second photographing unit does not necessarily have to be installed around the green, and is slightly separated from the green. It can also be installed at a certain distance.

以下、第1撮影ユニットとは使用者がゴルフショットする周辺に設置されるカメラ装置を意味し、第2撮影ユニットとは目標地点(例えば、グリーン上のホールカップ)の周辺に設置されるカメラ装置を意味すると定義する。   Hereinafter, the first photographing unit means a camera device installed in the vicinity where the user takes a golf shot, and the second photographing unit means a camera device installed in the vicinity of a target point (for example, a hole cup on the green). Is defined to mean

図9は本発明の他の一実施例によるゴルフ映像情報自動生成システムに用いられるゴルフ映像情報自動生成方法について説明するためのフローチャートである。   FIG. 9 is a flowchart for explaining a golf video information automatic generation method used in a golf video information automatic generation system according to another embodiment of the present invention.

図9に示したフローチャートによるゴルフ映像情報自動生成方法が適用される本発明によるゴルフ映像情報自動生成システムの第2撮影ユニットはパンチルトズーム(Pan−Tilt−Zoom)の可能なPTZカメラ装置によって具現される。   The second shooting unit of the golf video information automatic generation system according to the present invention to which the golf video information automatic generation method according to the flowchart shown in FIG. 9 is applied is implemented by a PTZ camera apparatus capable of pan-tilt-zoom. The

前記PTZカメラのパン機能はカメラを左右に回転する機能であり、チルト機能はカメラを上下に回転させる機能であり、ズーム機能は映像を拡大又は縮小する機能である。   The pan function of the PTZ camera is a function that rotates the camera left and right, the tilt function is a function that rotates the camera up and down, and the zoom function is a function that enlarges or reduces the image.

システムが動作し始めれば、第1撮影ユニットが使用者のゴルフショットについての映像撮影を始め、第2撮影ユニットも映像撮影を始める(S210)。この時、第2撮影ユニットは使用者がゴルフショットする位置(例えば、ティーボックス)から多少離れた距離(例えば、グリーンの周辺)に設置された状態で使用者がゴルフショットする位置を見て、予め設定された第1倍率でズームイン(Zoom−In)された状態で撮影を始める(以下、前記第2撮影ユニットの使用者がゴルフショットする位置を見て、予め設定された第1倍率でズームイン(Zoom−In)した状態を'基本状態'と言う)。   If the system starts to operate, the first shooting unit starts shooting the user's golf shot, and the second shooting unit also starts shooting the image (S210). At this time, the second shooting unit looks at the position where the user takes a golf shot in a state where it is installed at a distance (for example, around the green) slightly away from the position where the user takes a golf shot (for example, a tee box). Shooting is started in a zoomed-in state (Zoom-In) at a preset first magnification (hereinafter, the user of the second shooting unit looks at a position where a golf shot is taken and zooms in at a preset first magnification) (Zoom-In) is called “basic state”).

映像管理部521(図2参照)は前記第1撮影ユニット及び第2撮影ユニットのそれぞれから撮影された映像を収集して格納部510(図2参照)に格納する(S220)。   The video management unit 521 (see FIG. 2) collects the video shot from each of the first shooting unit and the second shooting unit and stores it in the storage unit 510 (see FIG. 2) (S220).

使用者がティーボックスでゴルフショットしてボールを打撃すれば、トリガー処理部522(図2参照)によってトリガー信号が発生する又は外部のゴルフ端末機などからトリガー信号を受信する(S230)。このようにトリガー信号が発生すれば、映像編集部525(図2参照)はトリガー時点を決定する(S232)。   When the user hits the ball by hitting a golf shot with a tee box, a trigger signal is generated by the trigger processing unit 522 (see FIG. 2) or a trigger signal is received from an external golf terminal (S230). When the trigger signal is generated in this way, the video editing unit 525 (see FIG. 2) determines the trigger time (S232).

また、前述したようにトリガー信号が発生すれば、第2撮影ユニットは基本状態で撮影してから、予め設定された第2倍率で段々ズームアウト(Zoom−Out)しながら撮影した映像を映像情報処理装置に伝送する(S310)。   Further, as described above, when the trigger signal is generated, the second photographing unit shoots images in the basic state, and then captures images captured while gradually zooming out (Zoom-Out) at a preset second magnification. The data is transmitted to the processing device (S310).

前述したように第2撮影ユニットが段々ズームアウトして、前記予め設定された第2倍率(基本倍率でもあり得、それより高い倍率でもあり得る)に到逹すれば、ズームアウトを完了する(S320)。   As described above, when the second photographing unit zooms out gradually and reaches the preset second magnification (which may be a basic magnification or a higher magnification), the zoom-out is completed ( S320).

ズームアウトが完了した後、前記第2撮影ユニットはパンチルティングを行って、すなわち上下に回転する、左右に回転する、又は上下左右に回転して目標地点を含む所定領域を撮影するようにする。すなわち、第2撮影ユニットは、その見る撮影範囲内にホールカップを含むグリーンが含まれる該当ビューとなるように前記第2撮影ユニットのパンチルティングが駆動される。   After the zoom-out is completed, the second photographing unit performs punching, that is, rotates up and down, rotates left and right, or rotates up and down and left and right to photograph a predetermined area including the target point. In other words, the second photographing unit is driven to perform punching of the second photographing unit so as to obtain a corresponding view in which the green including the hole cup is included in the photographing range to be viewed.

ここで、前記第2撮影ユニットは、初めから予め設定された上下及び/又は左右の角度で回転することによって前記パンチルティングを行うこともでき、映像情報処理装置が前記第2撮影ユニットから伝送される映像を分析してホールカップ位置を認識し、前記第2撮影ユニットに回転すべき上下及び/又は左右の角度情報を伝達することによって前記パンチルティングを行うこともでき、第2撮影ユニットそのものに映像分析ユニットを含み、自らの映像分析によってホールカップ位置を認識し、そのホールカップ位置を基準に回転角度情報を計算し、それによって前記パンチルティングを行うこともできる。   Here, the second photographing unit can perform the punching by rotating at a preset vertical and / or horizontal angle from the beginning, and the video information processing apparatus is transmitted from the second photographing unit. The punching can be performed by recognizing the position of the hole cup by analyzing the image and transmitting the angle information of the up and down and / or left and right to be rotated to the second photographing unit. It includes an image analysis unit, recognizes the hole cup position by its own image analysis, calculates rotation angle information based on the hole cup position, and thereby performs the punching.

前述したように第2撮影ユニットのパンチルティングを行った後、前記第2撮影ユニットはグリーンの映像を撮影し、映像情報処理装置にその撮影された映像を伝送する(S340)。   As described above, after punching the second image capturing unit, the second image capturing unit captures a green image and transmits the captured image to the image information processing apparatus (S340).

一方、前記第1撮影ユニットがティーボックスの後方からボールの進行方向に見る画角で撮影する映像の場合、打撃によってボールが多少遠く飛べば映像内でそれ以上ボールを検出することができなくなる。この時、映像編集部は、前記第1撮影ユニットの撮影映像でボールがそれ以上検出されない時点、すなわち第1撮影ユニット映像でボールがなくなった時点を決定することができる。   On the other hand, in the case of an image shot by the first shooting unit with an angle of view seen from the back of the tee box in the direction of ball movement, if the ball flies a little far away by hitting, the ball can no longer be detected in the image. At this time, the video editing unit may determine a time point when no more balls are detected in the captured image of the first shooting unit, that is, a time point when the ball is exhausted in the first shooting unit image.

追後に、映像編集部は、ゴルフ映像情報を生成するとき、前記ボールがなくなった時点を基準に前記第1撮影ユニットの映像から抽出する映像の抽出区間を決定することができ、あるいは前述したような'ボールがなくなった時点'を決定せずに前記トリガー時点から予め設定された時間が経過すれば、その経過した時間までの映像を前記第1撮影ユニットの映像から抽出することもできる。図9では後者を示している。   After that, when generating the golf video information, the video editing unit can determine the video extraction section to be extracted from the video of the first shooting unit based on the time when the ball is exhausted, or as described above If a preset time elapses from the trigger time without determining the time when the ball has run out, the video up to the elapsed time can be extracted from the video of the first photographing unit. FIG. 9 shows the latter.

すなわち、映像情報処理装置は、前記トリガー信号が発生した後に予め設定された時間が経過したかを判断し(S400)、その予め設定された時間が経過すれば、前記第1撮影ユニットの撮影映像の収集を終了する(S410)(第1撮影ユニットも撮影を終了する)。   That is, the video information processing apparatus determines whether a preset time has elapsed after the trigger signal has been generated (S400), and if the preset time has elapsed, the video image taken by the first imaging unit. (S410) (the first photographing unit also finishes photographing).

そして、映像情報処理装置のボールトラッキング処理部523(図2参照)はグリーン領域を撮影している第2撮影ユニットの撮影映像に対して差映像及びボール検出方法などを適用してボールを検出することによってボールの位置をトラッキングする(S420)。   Then, the ball tracking processing unit 523 (see FIG. 2) of the video information processing apparatus detects the ball by applying a difference video, a ball detection method, and the like to the shot video of the second shooting unit shooting the green area. Thus, the position of the ball is tracked (S420).

ボールトラッキング処理部によってボールトラッキングが進んでからボールがそれ以上動かない場合、例えばボールがグリーン上で転がってから停止した場合(S500)、前記映像編集部はボールがグリーン上で停止した時点を決定する(S502)。   If the ball does not move any further after the ball tracking processing unit has advanced, for example, if the ball stops after rolling on the green (S500), the video editing unit determines when the ball stops on the green. (S502).

そして、前述したように第2撮影ユニットの映像でボールが停止したと判断した場合、映像管理部は第2撮影ユニット撮影映像の収集を終了する(S350)(第2撮影ユニットも撮影を終了する)。この時、前記第2撮影ユニットはズームイン及びパンチルティングによって前記基本状態に復帰する(S360)。   When it is determined that the ball has stopped in the video of the second shooting unit as described above, the video management unit ends collection of the second shooting unit shooting video (S350) (the second shooting unit also ends shooting). ). At this time, the second photographing unit returns to the basic state by zooming in and punching (S360).

ボールトラッキング処理部はホールカップの位置を既に知っている映像分析によってボールの位置情報も知っているので、ホールカップの位置とボールの位置情報を用いてホールインワンであるかを判断することができる(S520)。   Since the ball tracking processing unit also knows the position information of the ball through video analysis that already knows the position of the hole cup, it can determine whether it is a hole-in-one using the position of the hole cup and the position information of the ball ( S520).

仮に、ホールインワンが発生した場合、映像編集部は最終的に生成されるゴルフ映像情報に前もって用意しておいたホールインワン祝いのコンテンツを挿入するようにする(S521)。   If a hole-in-one occurs, the video editing unit inserts a hole-in-one celebration content prepared in advance into the finally generated golf video information (S521).

仮に、ホールインワンではない場合、ボールトラッキング処理部はホールカップとボール間の距離を算出し(S540)、映像編集部は最終的に生成されるゴルフ映像情報に前記算出されたホールカップとボール間の距離情報を表示する(S550)。   If it is not a hole-in-one, the ball tracking processing unit calculates the distance between the hole cup and the ball (S540), and the video editing unit finally determines the distance between the calculated hole cup and the ball in the generated golf video information. The distance information is displayed (S550).

一方、映像編集部は、前記S232段階で決定したトリガー時点と、S502段階で決定したボールのグリーン上で停止した時点などを用いて、前記決定された各時点を基準に前記格納部に格納された各撮影ユニット映像からそれぞれ映像を抽出し、その抽出された映像に対して予め設定された事項による編集を行い、必要な場合、前記S521段階のホールインワン祝いのコンテンツ又は前記S550段階の距離情報表示などを挿入することによって最終的にゴルフ映像情報を生成する(S600)。   On the other hand, the video editing unit uses the trigger time determined in step S232 and the time point stopped on the green of the ball determined in step S502 to store the video editing unit in the storage unit based on the determined time points. Each video is extracted from each shooting unit video, and the extracted video is edited according to preset items. If necessary, the content of the hole-in-one celebration in step S521 or the distance information display in step S550 is displayed. Etc. are finally generated to generate golf video information (S600).

図9に示したフローチャートによるゴルフ映像情報の自動生成に関連した具体的な例を図10〜図13を参照して説明する。   A specific example related to automatic generation of golf video information according to the flowchart shown in FIG. 9 will be described with reference to FIGS.

図10は図9に示したフローチャートによるゴルフ映像情報自動生成方法によってそれぞれの撮影ユニット映像から必要な映像を抽出して編集することによってゴルフ映像情報を生成する一例を示した図である。   FIG. 10 is a diagram showing an example of generating golf video information by extracting and editing a necessary video from each shooting unit video by the golf video information automatic generation method according to the flowchart shown in FIG.

図10で、IM−Aは第1撮影ユニットの撮影映像を示すもので、映像管理部によって収集されて格納部に格納された映像を示し、IM−Bは第2撮影ユニットの撮影映像を示すもので、映像管理部によって収集されて格納部に格納された映像を示し、IM−Gはそれぞれの映像から抽出された映像が編集された映像を示す。   In FIG. 10, IM-A indicates a captured image of the first imaging unit, indicates an image collected by the image management unit and stored in the storage unit, and IM-B indicates a captured image of the second imaging unit. Therefore, IM-G indicates a video obtained by editing a video extracted from each video and collected by the video management unit and stored in the storage unit.

それぞれの映像IM−A、IM−Bからゴルフ映像情報を生成するために必要な映像を抽出するためには、トリガー時点(図9のS232段階参照)及びボールが停止した時点(図9のS502段階参照)がそれぞれ決定されることが好ましく、図9で説明したボールがなくなった時点も場合によって決定されることができる。   In order to extract images necessary for generating golf image information from the respective images IM-A and IM-B, a trigger time (see step S232 in FIG. 9) and a time point when the ball stops (S502 in FIG. 9). It is preferable to determine each stage), and the time when the ball described in FIG.

ここで、トリガー時点はT1、ボールがなくなった時点又はトリガー時点から予め設定された区間の時点はT2、そしてボールの停止した時点はT3であり、T1、T2及びT3についての事項は図8で説明したようである。   Here, the trigger time is T1, the time when the ball runs out or the time of the preset section from the trigger time is T2, and the time when the ball stops is T3. The matters regarding T1, T2 and T3 are shown in FIG. As explained.

図10に示したように、第1撮影ユニットの映像IM−Aからトリガー時点T1以前の予め設定された区間R1−1に対応する映像とトリガー時点T1からT2時点までの区間R1−2に対応する映像が抽出されることができる。   As shown in FIG. 10, the video corresponding to the preset section R1-1 before the trigger time T1 from the video IM-A of the first photographing unit and the section R1-2 from the trigger time T1 to the time T2 are supported. A video to be extracted can be extracted.

IM−A映像で、R1−1区間及びR1−2区間に対応して抽出される映像をER1という。
一方、図10に示したように、第2撮影ユニットの映像に対する分析によってボールが停止した時点T3が決定されれば、第2撮影ユニットの映像IM−Bからトリガー時点T1からボールが停止した時点T3までの区間R2を抽出することができる。
In the IM-A video, the video extracted corresponding to the R1-1 section and the R1-2 section is referred to as ER1.
On the other hand, as shown in FIG. 10, if the time T3 when the ball stops is determined by analyzing the video of the second shooting unit, the time when the ball stops from the trigger time T1 from the video IM-B of the second shooting unit. A section R2 up to T3 can be extracted.

もちろん、ボールが停止した時点T3を別に判断しない場合には、トリガー時点T1から予め設定された区間を前記R2区間として抽出することができる。   Of course, if the time T3 at which the ball stops is not determined separately, a section preset from the trigger time T1 can be extracted as the R2 section.

ここで、図9に基づいて説明したように、第2撮影ユニットの映像IM−Bは基本状態でティーボックス領域に対するズームイン映像を示し(Sa)、トリガー時点T1から(又はその以前又は以後の予め設定された時点でもあり得る)ズームアウト映像を示し(Sb)、ズームアウトが完了すれば、パンチルティングによって変化したビュー(ホールカップを含むグリーン領域)を示し(Sc)、その後には同じビューを維持する又は該当ビューをもっと拡大するなどの映像を示す(Sd)。   Here, as described with reference to FIG. 9, the video IM-B of the second photographing unit shows a zoomed-in video with respect to the tee box area in the basic state (Sa), and from the trigger time T1 (or before or after that in advance). The zoom-out video is displayed (Sb), and when zoom-out is completed, the view (green area including the hole cup) changed by punching is displayed (Sc), and then the same view is displayed. An image of maintaining or enlarging the corresponding view is shown (Sd).

図9のS420及びその後の段階のボールトラッキングについての事項は前記Sd映像を用いて分析することによって処理することができる。   The items regarding S420 in FIG. 9 and the subsequent ball tracking can be processed by analyzing using the Sd image.

第2撮影ユニットの映像IM−BからR2区間の抽出された映像をER2と言う。好ましくは、前記ER2映像は前記ズームイン映像(Sa)、ズームアウト映像(Sb)、パンチルティングによって変化したビュー(Sc)及びその後の該当ビューを維持する又は拡大した映像(Sd)を全て含むことにより、最終的に編集が完了した映像で使用者のゴルフショットによるゴルフ映像情報がもっとドラマチックに現れることができる。   The video extracted in the R2 section from the video IM-B of the second photographing unit is referred to as ER2. Preferably, the ER2 image includes all of the zoom-in image (Sa), the zoom-out image (Sb), the view (Sc) changed by punching and the image (Sd) that maintains or enlarges the corresponding view thereafter. Finally, the golf video information by the user's golf shot can appear more dramatic in the video that has been edited.

前述したように、第1撮影ユニット映像IM−A及び第2撮影ユニット映像IM−BからそれぞれER1及びER2の映像が抽出されれば、これを用いて編集映像IM−Gを作ることができる。   As described above, if the images of ER1 and ER2 are extracted from the first shooting unit image IM-A and the second shooting unit image IM-B, respectively, the edited image IM-G can be created using the extracted images.

前記編集映像IM−Gに所定のコンテンツなどを挿入する又は表示することは図8で説明したものと同一であるので、これについての具体的な説明は省略する。   Inserting or displaying a predetermined content or the like in the edited video IM-G is the same as that described with reference to FIG. 8, and a detailed description thereof will be omitted.

最終的に、ゴルフ映像情報の生成が完了すれば、映像情報処理装置はゴルフ場の運営サーバー又は別個のサーバーに前記生成の完了したゴルフ映像情報を伝送してサーバーで格納管理するようにすることができ、使用者はPC又はモバイル端末機を用いてサーバーに接続して該当ゴルフ映像情報をダウンロードすることによって自らの記念的なゴルフショットについてのゴルフ映像情報を受けることができる。   Finally, when the generation of the golf video information is completed, the video information processing apparatus transmits the generated golf video information to a golf course management server or a separate server, and stores and manages it in the server. The user can receive golf video information about his commemorative golf shot by connecting to the server using a PC or a mobile terminal and downloading the corresponding golf video information.

一方、図11では図10で説明したER1映像及びER2映像の編集映像の一例を時系列的に示している。   On the other hand, FIG. 11 shows an example of the edited video of the ER1 video and the ER2 video described in FIG. 10 in time series.

図11の(a)及び(b)は第1撮影ユニットから抽出されたER1映像の例を示すもので、映像内のティーボックス領域で使用者がゴルフショットしている場面を示している。   FIGS. 11A and 11B show examples of the ER1 video extracted from the first photographing unit, and show a scene where the user is making a golf shot in the tee box area in the video.

図11の(c)は第2撮影ユニットから抽出されたER2映像の例を示すもので、ティーボックスTB領域をズームイン映像で撮影している状態を示している。   FIG. 11C shows an example of the ER2 video extracted from the second shooting unit, and shows a state where the tea box TB area is shot with a zoom-in video.

図11の(d)は映像内のティーボックスTB領域がズームアウトによって遠くなっている状態を示し、図11の(e)は第2撮影ユニットがパンチルティング(すなわち、上下及び/又は左右に回転)によってカメラビューを変更している状態を示し、図11の(f)はパンチルティングによってカメラビューの変更が完了した状態を示している(図11の(f)の映像から分かるように、第2撮影ユニットはホールカップhc/旗竿flの位置を含むグリーンG領域が含まれるビューを有するようにパンチルティングすることが好ましい)。   FIG. 11D shows a state in which the tee box TB area in the video is far away due to zoom-out, and FIG. 11E shows the second photographing unit pantilting (that is, rotating up and down and / or left and right). ) Shows a state in which the camera view is changed, and FIG. 11 (f) shows a state in which the camera view change has been completed by punching (as can be seen from the image in FIG. 11 (f), The two shooting units are preferably punched so as to have a view including the green G area including the position of the hole cup hc / flagpole fl).

図11の(f)以後の映像ではグリーン上にボールが登場し(使用者が打撃したボールがグリーンに到逹する前に第2撮影ユニットがズームアウトによってパンチルティングされてグリーンを見ていることが好ましい)、図12の(a)及び(b)は第2撮影ユニットがパンチルティングされてビューが変更して状態のままの映像を撮影しているものを示し、図12の(a)に示した状態でボールがグリーンに到逹し、図12の(b)に示したようにグリーンG上にボールbaが登場し、その移動を止めるまでの映像がゴルフ映像情報に含まれる場合である。   In the video after FIG. 11 (f), the ball appears on the green (the second shooting unit is panting by zooming out and watching the green before the ball hit by the user reaches the green. (A) and (b) of FIG. 12 show that the second photographing unit is punched and the view is changed to shoot an image as it is, and FIG. In this state, the ball reaches the green, and as shown in FIG. 12B, the ball ba appears on the green G and the video until the movement is stopped is included in the golf video information. .

一方、図11の(f)以後の映像から図13の(a)〜(d)の映像にも連結されることができる。図13の(a)〜(d)では第2撮影ユニットがパンチルティングされた後に予め設定された倍率で拡大された映像が現れる場合を示している。すなわち、図13の(a)はパンチルティングによって第2撮影ユニットのビューが変更した場合を示し、図13の(b)、(c)及び(d)はホールカップhcの位置を基準に予め設定された倍率で拡大された状態でボールbaが登場して止まるまでの映像を示す。   On the other hand, the image after (f) of FIG. 11 can be connected to the images of (a) to (d) of FIG. FIGS. 13A to 13D show a case where an image enlarged at a preset magnification appears after the second photographing unit is punched. 13A shows a case where the view of the second photographing unit is changed by punching, and FIGS. 13B, 13C and 13D are preset based on the position of the hole cup hc. The image until the ball ba appears and stops in the state of being magnified at the scaled ratio is shown.

図13の(b)〜(d)の拡大された映像は第2撮影ユニットがズームインして撮影した映像でもあり得、映像情報処理装置が第2撮影ユニットから受けた映像に対して予め設定された倍率で拡大編集した映像でもあり得る。   The enlarged images shown in (b) to (d) of FIG. 13 may be images taken by the second shooting unit zooming in, and the image information processing apparatus is preset with respect to the images received from the second shooting unit. It can also be an image that has been enlarged and edited at a different magnification.

以上説明したように、本発明によるゴルフ映像情報自動生成システム及びゴルフ映像情報自動生成方法はゴルフ場の特定ホールでそれぞれの領域を撮影する映像を収集し、これを分析することによって、編集のための適切な映像抽出の基準となる時点を決定することができ、それから抽出した映像を編集することによって、ゴルフラウンドしている使用者に対してゴルフショットからそのゴルフショットされたボールの目標地点を含む領域上での動きまで一連の過程を見せる映像情報、すなわちゴルフ映像情報を自動で生成して使用者に提供することができ、そのようなゴルフ映像情報をよほどドラマチックに構成して自動で生成することができるので、ゴルフを楽しむ使用者には非常に貴い記念品となることができる特長がある。   As described above, the golf video information automatic generation system and the golf video information automatic generation method according to the present invention collect videos for shooting each area at a specific hole of a golf course, and analyze the collected videos for editing. The target time point of the golf shot can be determined from the golf shot to the user who is playing a golf round by editing the extracted video. It can automatically generate video information that shows a series of processes up to the movement on the area including it, that is, golf video information, and provide it to the user, and such golf video information can be generated very dramatically and automatically generated Therefore, the user who enjoys golf has the feature that it can be a very precious memento.

100 第1撮影ユニット
110 第1カメラ
120 第2カメラ
200 第2撮影ユニット
210 第3カメラ
220 第4カメラ
500 映像情報処理装置
510 格納部
520 情報処理部
521 映像管理部
522 トリガー処理部
523 ボールトラッキング処理部
524 ホールカップ位置感知部
525 映像編集部
DESCRIPTION OF SYMBOLS 100 1st imaging | photography unit 110 1st camera 120 2nd camera 200 2nd imaging | photography unit 210 3rd camera 220 4th camera 500 Image | video information processing apparatus 510 Storage part 520 Information processing part 521 Image | video management part 522 Trigger process part 523 Ball tracking process 524 Hall cup position sensing unit 525 Video editing unit

以上説明したように、本発明によるゴルフ映像情報自動生成システム及びゴルフ映像情報自動生成方法はゴルフ場の特定ホールでそれぞれの領域を撮影する映像を収集し、これを分析することによって、編集のための適切な映像抽出の基準となる時点を決定することができ、それから抽出した映像を編集することによって、ゴルフラウンドしている使用者に対してゴルフショットからそのゴルフショットされたボールの目標地点を含む領域上での動きまで一連の過程を見せる映像情報、すなわちゴルフ映像情報を自動で生成して使用者に提供することができ、そのようなゴルフ映像情報をよほどドラマチックに構成して自動で生成することができるので、ゴルフを楽しむ使用者には非常に貴い記念品となることができる特長がある。
[項目1]
ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムであって、
撮影領域内で使用者のゴルフショットに対する映像を取得する第1撮影ユニットと、
目標地点を含む領域を撮影する第2撮影ユニットと、
上記第1撮影ユニット及び第2撮影ユニットからそれぞれ撮影された映像を収集し、上記第1撮影ユニット及び第2撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、上記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって上記ゴルフ映像情報を自動で生成する映像情報処理装置と、
を含む、ゴルフ映像情報自動生成システム。
[項目2]
上記第1撮影ユニットは、ゴルフスイングする使用者の側面を撮影する第1カメラと上記ゴルフスイングする使用者の正面を撮影する第2カメラの少なくとも一つを含んでなり、上記第2撮影ユニットは、目標地点を含む領域を撮影する第3カメラと上記第3カメラとは違う視角で上記目標地点を含む領域を撮影する第4カメラの少なくとも一つを含んでなることを特徴とする、項目1に記載のゴルフ映像情報自動生成システム。
[項目3]
上記映像情報処理装置は、
上記第1撮影ユニット及び第2撮影ユニットの各カメラからそれぞれ撮影された映像を格納する格納部と、
上記第1撮影ユニット及び第2撮影ユニットの各カメラからそれぞれ撮影された映像を収集し、各カメラ別に区分して上記格納部に格納して管理する映像管理部と、上記ゴルフ映像情報の生成のための映像抽出区間を上記各カメラ別映像に対してそれぞれ決定し、上記決定された映像の抽出区間によって上記格納部に格納された各カメラ別映像のそれぞれから抽出された映像を予め設定された事項によって編集することによって上記ゴルフ映像情報を自動で生成する映像編集部とを含む情報処理部を含み、
上記情報処理部は上記自動で生成されたゴルフ映像情報をサーバー又は上記使用者の個人端末機に伝送するように構成されることを特徴とする、項目2に記載のゴルフ映像情報自動生成システム。
[項目4]
上記情報処理部は、上記第1撮影ユニットの映像に対する映像処理によってボールが打撃によって動くことを感知し、該当映像内でボールが打撃によって動くことを感知するとトリガー信号を発生するトリガー処理部をさらに含み、上記映像編集部は、上記トリガー処理部によってトリガー信号が発生する時点を基準に上記ゴルフ映像情報の生成のための映像抽出区間を上記各カメラ別映像に対してそれぞれ決定するように構成されることを特徴とする、項目3に記載のゴルフ映像情報自動生成システム。
[項目5]
上記情報処理部は上記使用者のゴルフスイングによってボールが打撃されるときに外部から伝送されるトリガー信号を受信し、上記映像編集部は上記外部からのトリガー信号受信時点を基準に上記ゴルフ映像情報の生成のための映像抽出区間を上記各カメラ別映像に対してそれぞれ決定するように構成されることを特徴とする、項目3に記載のゴルフ映像情報自動生成システム。
[項目6]
上記情報処理部は、上記第1撮影ユニットの映像に対する映像処理によってボールが打撃によって動くことを感知し、該当映像内でボールが打撃によって動くことを感知するとトリガー信号を発生するトリガー処理部と、上記第2撮影ユニットの映像に対する映像処理によってボールを検出し、ボールの動きが止まった時点を決定するボールトラッキング処理部とをさらに含み、上記映像編集部は上記トリガー処理部によってトリガー信号が発生する時点及び上記ボールトラッキング処理部によって決定されるボールの動きが止まった時点を基準に上記ゴルフ映像情報の生成のための映像抽出区間を上記各カメラ別映像に対してそれぞれ決定するように構成されることを特徴とする、項目3に記載のゴルフ映像情報自動生成システム。
[項目7]
ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムであって、
ティーボックスに設置され、撮影領域内で使用者のゴルフショットに対する映像を取得し、上記ゴルフショットする使用者の側面を撮影する第1撮影ユニットと、
グリーンを含む領域を撮影する第2撮影ユニットと、
上記第1撮影ユニット及び第2撮影ユニットからそれぞれ撮影された映像を収集し、上記第1撮影ユニット及び第2撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、上記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって上記ゴルフ映像情報を自動で生成する映像情報処理装置と、
を含む、ゴルフ映像情報自動生成システム。
[項目8]
上記映像情報処理装置は、
上記第1撮影ユニット及び第2撮影ユニットからそれぞれ撮影された映像を格納する格納部と、
上記第1撮影ユニット及び第2撮影ユニットからそれぞれ撮影された映像を収集し、各撮影ユニット別に区分して上記格納部に格納して管理する映像管理部と、上記ゴルフ映像情報の生成のための映像抽出区間を上記各撮影ユニット別映像に対してそれぞれ決定し、上記決定された映像の抽出区間によって上記格納部に格納された各撮影ユニット別映像のそれぞれから抽出された映像を予め設定された事項によって編集することによって上記ゴルフ映像情報を自動で生成する映像編集部とを含む情報処理部を含み、
上記情報処理部は上記自動で生成されたゴルフ映像情報をサーバー又は上記使用者の個人端末機に伝送するように構成されることを特徴とする、項目7に記載のゴルフ映像情報自動生成システム。
[項目9]
上記情報処理部は、上記第2撮影ユニットの映像に対する映像処理によってボールを検出し、ボールの動きが止まった時点を決定するボールトラッキング処理部をさらに含み、上記映像編集部は映像の分析又は外部信号入力によってトリガー信号が発生する時点及び上記ボールトラッキング処理部によって決定されるボールの動きが止まった時点を基準に上記ゴルフ映像情報の生成のための映像抽出区間を上記各撮影ユニット別映像に対してそれぞれ決定するように構成されることを特徴とする、項目8に記載のゴルフ映像情報自動生成システム。
[項目10]
上記情報処理部は、上記第2撮影ユニットの映像から上記グリーン上のホールカップ又は上記ホールカップの旗竿を認識して上記グリーン上のホールカップの位置を実時間で感知するホールカップ位置感知部と、上記第2撮影ユニットの映像に対する映像処理によってボールの位置をトラッキングするボールトラッキング処理部とをさらに含み、上記ボールトラッキング処理部は、上記ホールカップ位置感知部によって感知されたホールカップの位置と上記トラッキングされたボールの位置を用いてホールインワンであるかの判断及び上記ボールと上記ホールカップ間の距離の算出の少なくとも一つを行うように構成され、上記映像編集部は、上記ボールトラッキング処理部によってホールインワンと判断された場合、上記生成されるゴルフ映像情報にホールインワン祝いのためのコンテンツを挿入し、上記ボールトラッキング処理部によって上記ボールと上記ホールカップ間の距離が算出された場合、上記生成されるゴルフ映像情報に上記算出されたボールとホールカップ間の距離を表示するようにすることを特徴とする、項目8に記載のゴルフ映像情報自動生成システム。
[項目11]
ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムであって、
ティーボックスに設置され、撮影領域内で使用者のゴルフショットに対する映像を取得するティーボックス撮影ユニットと、
フェアウェイ上の一領域を撮影するように設置されるフェアウェイ撮影ユニットと、
上記ティーボックス撮影ユニット及びフェアウェイ撮影ユニットからそれぞれ撮影された映像を収集し、上記ティーボックス撮影ユニット及びフェアウェイ撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、上記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって上記ゴルフ映像情報を自動で生成する映像情報処理装置と、
を含む、ゴルフ映像情報自動生成システム。
[項目12]
上記フェアウェイ撮影ユニットは上記フェアウェイ上に前もって設定しておいた目標領域を撮影するように構成され、上記映像情報処理装置は上記フェアウェイ撮影ユニットから収集した映像を分析して該当映像でボールの位置を算出することによってゴルフラウンドする使用者のそれぞれが行ったゴルフショットによってボールが上記目標領域内に着地したかを判断するように構成され、その判断結果を上記使用者に知らせる又はサーバーに伝送して記録するようにすることを特徴とする、項目11に記載のゴルフ映像情報自動生成システム。
[項目13]
上記映像情報処理装置は、上記フェアウェイ撮影ユニットから収集した映像を分析して該当映像でボールの位置を算出することにより、ゴルフラウンドする使用者のうち最も長い飛距離を記録した使用者を判別する又は上記飛距離に基づいて上記使用者に対して順位を決定するように構成され、上記判別又は決定された結果を上記使用者に知らせる又はサーバーに伝送して記録するようにすることを特徴とする、項目11に記載のゴルフ映像情報自動生成システム。
[項目14]
ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムであって、
ゴルフ場の特定ホールの一側に設置され、撮影領域内で使用者のゴルフショットに対する映像を取得する第1撮影ユニットと、
上記特定ホールの他側に設置され、パンチルトズーム駆動が可能であり、予め設定された事項によってズームイン、ズームアウト、及び上下及び左右の少なくとも一方への回転によるビュー変更の少なくとも一つを行って、上記使用者がゴルフショットすることによる映像を撮影するように構成される第2撮影ユニットと、
上記第1撮影ユニット及び第2撮影ユニットからそれぞれ撮影された映像を収集し、上記第1撮影ユニット及び第2撮影ユニットから収集されたそれぞれの映像から抽出された各映像を予め設定された事項によって編集することによって上記ゴルフ映像情報を自動で生成する映像情報処理装置と、
を含む、ゴルフ映像情報自動生成システム。
[項目15]
上記第2撮影ユニットは、予め設定された第1倍率でズームインされて上記使用者のゴルフショットに対する映像を取得してから上記映像情報処理装置のトリガー信号又は外部から入力されるトリガー信号によって予め設定された第2倍率でズームアウトされ、目標地点を含む領域が撮影領域内に含まれるように上下及び左右ので少なくとも一方に回転して映像を撮影するように構成され、上記映像情報処理装置は、上記第1撮影ユニットから収集した映像で上記トリガー信号を基準に予め設定された区間に対して抽出した映像と上記第2撮影ユニットから収集した映像から上記トリガー信号を基準に上記ズームイン映像、上記ズームアウト映像及び上下及び左右の少なくとも一方に回転して撮影した上記目標地点を含む領域の映像を含むように抽出した映像とを結合することによって上記ゴルフ映像情報を自動で生成するように構成されることを特徴とする、項目14に記載のゴルフ映像情報自動生成システム。
[項目16]
ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムのゴルフ映像情報自動生成方法であって、
少なくとも一つのカメラを含む第1撮影ユニットによってその撮影領域内で使用者がゴルフショットすることに対して撮影される映像を収集して格納部に格納する段階と、
少なくとも一つのカメラを含む第2撮影ユニットによって目標地点を含む領域に対して撮影される映像を収集して上記格納部に格納する段階と、
上記第1撮影ユニット及び第2撮影ユニットのそれぞれから収集された映像の抽出区間を決定する段階と、
上記格納部に格納された各映像から上記決定された映像の抽出区間によって抽出した各映像を予め設定された事項によって編集することによって上記ゴルフ映像情報を自動で生成する段階と、
を含む、ゴルフ映像情報自動生成方法。
[項目17]
上記映像の抽出区間を決定する段階は、
上記第1撮影ユニットの映像に対する映像処理によってボールが打撃によって動くことを感知することによってトリガー信号が発生する時点又は上記使用者のゴルフスイングによってボールが打撃されるときに外部からのトリガー信号受信時点を決定する段階と、上記決定されたトリガー信号の発生時点又は受信時点を基準に上記ゴルフ映像情報の生成のための映像抽出区間を上記各撮影ユニットのカメラ別映像に対してそれぞれ決定する段階とを含むことを特徴とする、項目16に記載のゴルフ映像情報自動生成方法。
[項目18]
上記映像の抽出区間を決定する段階は、
上記第1撮影ユニットの映像に対する映像処理によってボールが打撃によって動くことを感知することによってトリガー信号が発生する時点又は上記使用者のゴルフスイングによってボールが打撃されるときに外部からのトリガー信号受信時点を決定する段階と、上記第2撮影ユニットの映像に対する映像処理によってボールを検出してボールの動きが止まった時点を決定する段階と、上記トリガー信号の発生時点又は受信時点及び上記ボールの動きが止まった時点を基準に上記ゴルフ映像情報の生成のための映像抽出区間を上記各撮影ユニットのカメラ別映像に対してそれぞれ決定する段階とを含むことを特徴とする、項目16に記載のゴルフ映像情報自動生成方法。
[項目19]
上記第2撮影ユニットの映像に対する映像処理によってボールの位置をトラッキングする段階と、上記目標地点の位置と上記トラッキングされたボールの位置を用いて上記ボールと目標地点間の距離を算出する段階とをさらに含み、
上記ゴルフ映像情報を自動で生成する段階は、上記算出されたボールと目標地点間の距離情報を上記生成されるゴルフ映像情報に表示する段階を含むことを特徴とする、項目16に記載のゴルフ映像情報自動生成方法。
[項目20]
上記第1撮影ユニットは、ティーボックスに設置され、ゴルフショットする使用者の側面を撮影するカメラを含むように構成され、
上記映像の抽出区間を決定する段階は、
上記第1撮影ユニットの映像で上記ティーボックスに設置された少なくとも一つのティーマーカーを認識し、上記認識された少なくとも一つのティーマーカーを基準に予め設定された大きさの関心領域を設定する段階と、複数のフレームの映像から上記設定された関心領域に対応する映像を抽出し、差映像分析によって打撃されたボールが動くことを感知することによってトリガー信号を発生させる段階と、上記トリガー信号が発生した時点を基準に上記ゴルフ映像情報の生成のための映像抽出区間を上記各撮影ユニットのカメラ別映像に対してそれぞれ決定する段階とを含むことを特徴とする、項目16に記載のゴルフ映像情報自動生成方法。
[項目21]
上記第2撮影ユニットはグリーンを含む領域を撮影するカメラを含むように構成され、
上記第2撮影ユニットの映像に対する映像処理によってボールの位置をトラッキングする段階と、上記グリーン上のホールカップの位置と上記トラッキングされたボールの位置を用いてホールインワンであるかを判断する又は上記ボールと上記ホールカップ間の距離を算出する段階とをさらに含み、
上記ゴルフ映像情報を自動で生成する段階は、
上記ボール位置のトラッキング結果、ホールインワンであると判断された場合、上記生成されるゴルフ映像情報にホールインワン祝いのためのコンテンツを挿入し、上記ボール位置のトラッキング結果、ホールインワンではない場合、上記生成されるゴルフ映像情報に上記算出されたボールとホールカップ間の距離を表示する段階をさらに含むことを特徴とする、項目16に記載のゴルフ映像情報自動生成方法。
[項目22]
上記第2撮影ユニットはグリーンを含む領域を撮影するカメラを含むように構成され、
ゴルフラウンドする各使用者のゴルフショットに対してそれぞれ上記第2撮影ユニットの映像に対する映像処理によってボールの位置をトラッキングする段階と、上記グリーン上のホールカップの位置と上記トラッキングされたボールの位置を用いて上記ゴルフラウンドする各使用者のゴルフショットに対して上記ホールカップにボールが最も近接した場合を判断する段階とをさらに含み、
上記ゴルフ映像情報を自動で生成する段階は、
上記ホールカップにボールが最も近接した場合であると判断された使用者のゴルフショットについてのゴルフ映像情報にニアリスト祝いのためのコンテンツを挿入する段階をさらに含むことを特徴とする、項目16に記載のゴルフ映像情報自動生成方法。
[項目23]
上記第2撮影ユニットはグリーンを含む領域を撮影するカメラを含むように構成され、
上記第2撮影ユニットの映像から上記グリーン上のホールカップ又は上記ホールカップの旗竿を認識して上記グリーン上のホールカップの位置を実時間で感知する段階と、上記第2撮影ユニットの映像に対する映像処理によってボールの位置をトラッキングする段階と、上記実時間感知によって決定される上記ホールカップの位置と上記トラッキングされたボールの位置を用いてホールインワンであるかの判断及び上記ボールと上記ホールカップ間の距離の算出の少なくとも一つを行う段階をさらに含み、
上記ゴルフ映像情報を自動で生成する段階は、
上記ホールインワンであるかの判断又は上記ボールとホールカップ間の距離算出の結果を上記ゴルフ映像情報に表示する段階をさらに含むことを特徴とする、項目16に記載のゴルフ映像情報自動生成方法。
[項目24]
ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムのゴルフ映像情報自動生成方法であって、
ゴルフ場の特定ホールの一側に設置された第1撮影ユニットによって撮影される使用者のゴルフショットに対する映像を収集して格納部に格納する第1撮影ユニット映像収集及び格納段階と、
上記特定ホールの他側に設置され、パンチルトズーム駆動の可能な第2撮影ユニットによってズームイン、ズームアウト、及び上下及び左右の少なくとも一方への回転によるビュー変更の少なくとも一つを行って上記使用者がゴルフショットすることによって撮影される映像を収集して上記格納部に格納する第2撮影ユニット映像収集及び格納段階と、
上記第1撮影ユニットから抽出された第1抽出映像及び第2撮影ユニットから抽出された第2抽出映像を予め設定された事項によって編集することによって上記ゴルフ映像情報を自動で生成する段階と、
を含む、ゴルフ映像情報自動生成方法。
[項目25]
上記第2撮影ユニット映像収集及び格納段階は、
上記第2撮影ユニットによって予め設定された第1倍率でズームインされた基本状態で上記使用者のゴルフショットに対する映像を取得する段階と、映像情報処理装置のトリガー信号又は外部から入力されるトリガー信号によって上記第2撮影ユニットが上記基本状態で予め設定された第2倍率でズームアウトされながら映像を取得する段階と、上記第2撮影ユニットが上下及び左右の少なくとも一方に回転駆動され、上記目標地点の位置情報を認識して上記目標地点を含む領域に対する映像を取得する段階と、上記それぞれの取得される映像を上記映像情報処理装置によって収集して上記格納部に格納する段階とを含むことを特徴とする、項目24に記載のゴルフ映像情報自動生成方法。
[項目26]
上記ゴルフ映像情報を自動で生成する段階は、
上記第1撮影ユニットから収集した映像から上記トリガー信号を基準に予め設定された区間に対する映像を抽出する段階と、上記第2撮影ユニットから収集した映像から上記トリガー信号を基準に上記ズームイン映像、上記ズームアウト映像及び上下及び左右の少なくとも一方に回転して撮影した上記目標地点を含む領域の映像を含むように映像を抽出する段階と、上記各抽出された映像を結合することによって又は上記各抽出された映像を結合し、その結合された映像に予め設定されたコンテンツを挿入する又は上記各抽出された映像に対して予め設定された映像処理をすることによって上記ゴルフ映像情報を自動で生成する段階とを含むことを特徴とする、項目25に記載のゴルフ映像情報自動生成方法。
[項目27]
上記ゴルフ映像情報を自動で生成する段階は、
上記第1撮影ユニットから収集した映像から上記トリガー信号を基準に予め設定された区間に対する映像を抽出する段階と、上記第2撮影ユニットから収集した映像から上記トリガー信号を基準に上記ズームイン映像、上記ズームアウト映像、上記上下及び左右の少なくとも一方に回転して撮影した上記目標地点を含む領域の映像及び上記目標地点を含む領域の映像に対して上記目標地点の位置によって決定される倍率でズームインした映像を含むように映像を抽出する段階と、上記各抽出された映像を結合することによって又は上記各抽出された映像を結合し、その結合された映像に予め設定されたコンテンツを挿入する又は上記各抽出された映像に対して予め設定された映像処理をすることによって上記ゴルフ映像情報を自動で生成する段階とを含むことを特徴とする、項目25に記載のゴルフ映像情報自動生成方法。
As described above, the golf video information automatic generation system and the golf video information automatic generation method according to the present invention collect videos for shooting each area at a specific hole of a golf course, and analyze the collected videos for editing. The target time point of the golf shot can be determined from the golf shot to the user who is playing a golf round by editing the extracted video. It can automatically generate video information that shows a series of processes up to the movement on the area including it, that is, golf video information, and provide it to the user, and such golf video information can be generated very dramatically and automatically generated Therefore, the user who enjoys golf has the feature that it can be a very precious memento.
[Item 1]
A system for automatically generating golf video information based on a golf shot of a user at a golf course,
A first photographing unit for obtaining an image of a user's golf shot in a photographing region;
A second photographing unit for photographing an area including the target point;
Collecting images taken from each of the first photographing unit and the second photographing unit, determining an extraction interval of the images collected from each of the first photographing unit and the second photographing unit, A video information processing apparatus that automatically generates the golf video information by editing each video extracted by the extraction section according to preset matters;
System for automatically generating golf video information.
[Item 2]
The first photographing unit includes at least one of a first camera that photographs a side surface of a user who performs a golf swing and a second camera that photographs a front surface of the user who performs the golf swing. Item 3 comprising at least one of a third camera that captures an area including a target point and a fourth camera that captures an area including the target point at a different viewing angle from the third camera. The golf image information automatic generation system described in 1.
[Item 3]
The video information processing apparatus
A storage unit for storing images shot from the respective cameras of the first shooting unit and the second shooting unit;
A video management unit that collects videos shot from each camera of the first shooting unit and the second shooting unit, stores them in each storage unit, stores them in the storage unit, and generates the golf video information. Video extraction sections for each camera-specific video are determined, and video extracted from each camera-specific video stored in the storage unit according to the determined video extraction section is preset. Including an information processing unit including a video editing unit that automatically generates the golf video information by editing according to matters,
3. The system for automatically generating golf video information according to item 2, wherein the information processing unit is configured to transmit the automatically generated golf video information to a server or the personal terminal of the user.
[Item 4]
The information processing unit further includes a trigger processing unit that detects that the ball is moved by hitting by the image processing on the image of the first photographing unit, and generates a trigger signal when the ball moves by hitting in the corresponding image. And the video editing unit is configured to determine a video extraction section for generating the golf video information for each camera video based on a time point when the trigger signal is generated by the trigger processing unit. 4. The system for automatically generating golf video information according to item 3, wherein
[Item 5]
The information processing unit receives a trigger signal transmitted from the outside when the ball is hit by the user's golf swing, and the video editing unit is configured to receive the golf video information based on the trigger signal reception time from the outside. 4. The system for automatically generating golf video information according to item 3, wherein a video extraction section for generating the video is determined for each of the video for each camera.
[Item 6]
The information processing unit senses that the ball is moved by hitting by image processing on the image of the first photographing unit, and generates a trigger signal when detecting that the ball moves by hitting in the corresponding image; A ball tracking processing unit that detects a ball by video processing on the video of the second photographing unit and determines when the movement of the ball stops, and the video editing unit generates a trigger signal by the trigger processing unit A video extraction section for generating the golf video information is determined for each camera video based on the time and the time when the movement of the ball determined by the ball tracking processing unit stops. 4. The golf video information automatic generation system according to item 3, wherein
[Item 7]
A system for automatically generating golf video information based on a golf shot of a user at a golf course,
A first photographing unit that is installed in a tee box, obtains an image of a user's golf shot in a photographing region, and photographs a side of the user who makes the golf shot;
A second photographing unit for photographing an area including green;
Collecting images taken from each of the first photographing unit and the second photographing unit, determining an extraction interval of the images collected from each of the first photographing unit and the second photographing unit, A video information processing apparatus that automatically generates the golf video information by editing each video extracted by the extraction section according to preset matters;
System for automatically generating golf video information.
[Item 8]
The video information processing apparatus
A storage unit for storing images shot from the first shooting unit and the second shooting unit;
A video management unit that collects videos shot from the first shooting unit and the second shooting unit, and stores and manages the videos in the storage unit for each shooting unit; and for generating the golf video information A video extraction section is determined for each of the shooting unit videos, and a video extracted from each of the shooting unit videos stored in the storage unit according to the determined video extraction section is set in advance. Including an information processing unit including a video editing unit that automatically generates the golf video information by editing according to matters,
8. The golf video information automatic generation system according to item 7, wherein the information processing unit is configured to transmit the automatically generated golf video information to a server or the user's personal terminal.
[Item 9]
The information processing unit further includes a ball tracking processing unit that detects a ball by video processing on the video of the second photographing unit and determines when the movement of the ball stops, and the video editing unit is configured to analyze video or externally A video extraction interval for generating the golf video information is defined for each video of each shooting unit based on the time when the trigger signal is generated by the signal input and the time when the movement of the ball determined by the ball tracking processing unit stops. Item 9. The golf video information automatic generation system according to Item 8, wherein the system is configured to determine each of them.
[Item 10]
The information processing unit recognizes the hole cup on the green or the flag cup of the hole cup from the image of the second shooting unit and senses the position of the hole cup on the green in real time; A ball tracking processing unit that tracks the position of the ball by image processing on the image of the second photographing unit, the ball tracking processing unit including the position of the hole cup sensed by the hole cup position sensing unit, It is configured to determine at least one of hole-in-one using the position of the tracked ball and to calculate the distance between the ball and the hole cup, and the video editing unit is configured by the ball tracking processing unit. If it is determined to be hole-in-one, the golf generated above When content for hole-in-one celebration is inserted into the image information, and the distance between the ball and the hole cup is calculated by the ball tracking processing unit, the calculated ball and hole cup are included in the generated golf video information. Item 9. The golf video information automatic generation system according to Item 8, wherein a distance between the two is displayed.
[Item 11]
A system for automatically generating golf video information based on a golf shot of a user at a golf course,
A tee box shooting unit that is installed in the tee box and acquires a video of the user's golf shot in the shooting area;
A fairway photography unit installed to photograph an area on the fairway;
Collect video taken from each of the tee box photography unit and the fairway photography unit, determine an extraction section of the video collected from each of the tee box photography unit and the fairway photography unit, and determine the extracted video extraction section A video information processing apparatus that automatically generates the golf video information by editing each video extracted in accordance with preset items;
System for automatically generating golf video information.
[Item 12]
The fairway photographing unit is configured to photograph a target area set in advance on the fairway, and the video information processing apparatus analyzes a video collected from the fairway photographing unit and determines a ball position in the corresponding video. It is configured to determine whether the ball has landed in the target area by a golf shot performed by each user of the golf round by calculating, and the determination result is notified to the user or transmitted to the server. Item 12. The golf video information automatic generation system according to Item 11, wherein the system is recorded.
[Item 13]
The video information processing apparatus determines the user who recorded the longest flight distance among golf round users by analyzing the video collected from the fairway shooting unit and calculating the position of the ball from the video. Alternatively, the order is determined for the user based on the flight distance, and the result of the determination or determination is notified to the user or transmitted to a server for recording. The golf video information automatic generation system according to item 11, wherein
[Item 14]
A system for automatically generating golf video information based on a golf shot of a user at a golf course,
A first shooting unit installed on one side of a specific hole of a golf course and acquiring an image of a user's golf shot in a shooting area;
It is installed on the other side of the specific hole and can be pan / tilt / zoom driven. A second shooting unit configured to take a picture of the user shooting a golf shot;
Collecting images captured from the first and second imaging units, and extracting each image extracted from the first and second imaging units according to preset matters. A video information processing apparatus that automatically generates the golf video information by editing;
System for automatically generating golf video information.
[Item 15]
The second photographing unit is set in advance by a trigger signal of the video information processing apparatus or an externally input trigger signal after zooming in at a first preset magnification to acquire an image of the user's golf shot. Zoomed out at the second magnification, and is configured to capture a video by rotating at least one of up and down and left and right so that the region including the target point is included in the imaging region, The zoomed-in video and the zoom based on the trigger signal based on the video collected from the first shooting unit and the video extracted for the preset section based on the trigger signal and the video collected from the second shooting unit It includes an out image and an image of the area including the target point that is rotated and photographed in at least one of up / down and left / right. The golf video information, characterized in that it is configured to automatically generate, golf video information automatic generation system of claim 14 by combining the the video extraction.
[Item 16]
A golf video information automatic generation method of a system for automatically generating golf video information by a golf shot of a user at a golf course,
Collecting and storing in a storage unit images captured by a first shooting unit including at least one camera for a golf shot of a user within the shooting area;
Collecting and storing in the storage unit images captured for an area including a target point by a second imaging unit including at least one camera;
Determining an extraction section of video collected from each of the first and second imaging units;
Automatically generating the golf video information by editing each video extracted by the determined video extraction section from each video stored in the storage unit according to preset matters;
A method for automatically generating golf video information.
[Item 17]
The stage of determining the video extraction section is as follows:
When a trigger signal is generated by detecting that the ball is moved by hitting by image processing on the image of the first photographing unit, or when a trigger signal is received from the outside when the ball is hit by the golf swing of the user Determining a video extraction section for generating the golf video information for each camera unit video based on the generation time or reception time of the determined trigger signal; Item 18. The method for automatically generating golf video information according to Item 16, wherein
[Item 18]
The stage of determining the video extraction section is as follows:
When a trigger signal is generated by detecting that the ball is moved by hitting by image processing on the image of the first photographing unit, or when a trigger signal is received from the outside when the ball is hit by the golf swing of the user Determining the time when the ball stops moving by detecting the ball by image processing on the image of the second photographing unit, and the time when the trigger signal is generated or received and the movement of the ball The golf video according to item 16, further comprising a step of determining a video extraction section for generating the golf video information for each camera video of each of the photographing units with reference to a point of time of stopping. Automatic information generation method.
[Item 19]
Tracking the position of the ball by image processing on the image of the second photographing unit, and calculating the distance between the ball and the target point using the position of the target point and the position of the tracked ball. In addition,
27. The golf according to item 16, wherein the step of automatically generating the golf video information includes a step of displaying the calculated distance information between the ball and the target point on the generated golf video information. Video information automatic generation method.
[Item 20]
The first photographing unit is installed in a tee box, and is configured to include a camera that photographs a side surface of a user who makes a golf shot,
The stage of determining the video extraction section is as follows:
Recognizing at least one tee marker installed in the tee box from an image of the first photographing unit, and setting a region of interest having a preset size based on the recognized at least one tee marker; Extracting a video corresponding to the set region of interest from a plurality of frames, generating a trigger signal by detecting movement of a ball hit by a differential video analysis, and generating the trigger signal And determining a video extraction section for generating the golf video information with respect to each camera video of each of the photographing units based on the time point of the golf video information. Automatic generation method.
[Item 21]
The second photographing unit is configured to include a camera for photographing an area including green,
Tracking the position of the ball by image processing on the image of the second photographing unit, and determining whether it is a hole in one using the position of the hole cup on the green and the position of the tracked ball; or Calculating the distance between the hole cups,
The step of automatically generating the golf video information is as follows:
If the result of tracking the ball position is determined to be hole-in-one, the content for hole-in-one celebration is inserted into the generated golf video information, and if the result of tracking the ball position is not hole-in-one, the above is generated. Item 17. The method for automatically generating golf image information according to item 16, further comprising the step of displaying the calculated distance between the ball and the hole cup in the golf image information.
[Item 22]
The second photographing unit is configured to include a camera for photographing an area including green,
The step of tracking the position of the ball by image processing on the image of the second shooting unit for each golf shot of each user who makes a golf round, and the position of the hole cup on the green and the position of the tracked ball Further comprising determining when the ball is closest to the hole cup with respect to the golf shot of each user using the golf round,
The step of automatically generating the golf video information is as follows:
Item 16 further includes the step of inserting a content for near list celebration into golf video information about a user's golf shot determined to be when the ball is closest to the hole cup. The method for automatically generating golf video information as described.
[Item 23]
The second photographing unit is configured to include a camera for photographing an area including green,
Recognizing the hole cup on the green or the flag cup of the hole cup from the image of the second shooting unit and detecting the position of the hole cup on the green in real time, and the image of the image of the second shooting unit Tracking the position of the ball by processing, determining whether it is a hole-in-one using the position of the hole cup determined by the real-time sensing and the position of the tracked ball, and between the ball and the hole cup. Further comprising performing at least one of the distance calculations;
The step of automatically generating the golf video information is as follows:
Item 17. The method for automatically generating golf image information according to item 16, further comprising the step of displaying the result of determining whether the hole is in one or calculating the distance between the ball and the hole cup on the golf image information.
[Item 24]
A golf video information automatic generation method of a system for automatically generating golf video information by a golf shot of a user at a golf course,
A first shooting unit image collection and storage stage for collecting images of a user's golf shots shot by a first shooting unit installed on one side of a specific hole of a golf course and storing them in a storage unit;
The user can zoom in, zoom out and change the view by rotating to at least one of up / down and left / right by a second photographing unit that is installed on the other side of the specific hole and can be driven by pan / tilt / zoom. A second shooting unit video collecting and storing step for collecting and storing the video shot by golf shot in the storage unit;
Automatically generating the golf video information by editing the first extracted video extracted from the first shooting unit and the second extracted video extracted from the second shooting unit according to preset matters;
A method for automatically generating golf video information.
[Item 25]
The second shooting unit image collection and storage stage includes:
According to a step of acquiring an image of the user's golf shot in a basic state zoomed in at a first magnification set in advance by the second photographing unit, and a trigger signal of the image information processing device or a trigger signal input from the outside Acquiring the image while the second photographing unit is zoomed out at the second magnification set in advance in the basic state, and the second photographing unit is rotationally driven up and down and / or left and right, Recognizing position information and acquiring a video for an area including the target point, and collecting the respective acquired videos by the video information processing apparatus and storing them in the storage unit. The method for automatically generating golf video information according to item 24.
[Item 26]
The step of automatically generating the golf video information is as follows:
Extracting a video for a preset section from the video collected from the first shooting unit with reference to the trigger signal; and the zoom-in video based on the trigger signal from the video collected from the second shooting unit; Extracting a video so as to include a zoomed-out video and a video of a region including the target point rotated and rotated at least one of up and down and left and right, and combining each of the extracted videos or each of the extractions The golf video information is automatically generated by combining the combined videos and inserting preset content into the combined videos or performing preset video processing on the extracted videos. 26. The method for automatically generating golf video information according to item 25, further comprising:
[Item 27]
The step of automatically generating the golf video information is as follows:
Extracting a video for a preset section from the video collected from the first shooting unit with reference to the trigger signal; and the zoom-in video based on the trigger signal from the video collected from the second shooting unit; Zoomed in at a magnification determined by the position of the target point with respect to the zoomed-out image, the image of the region including the target point and the image of the region including the target point, which is rotated and photographed in at least one of the vertical and horizontal directions Extracting a video to include a video and combining the extracted videos or combining the extracted videos and inserting preset content in the combined video; or The golf video information is automatically generated by performing preset video processing on each extracted video. Characterized in that it comprises a floor, a golf video information automatically generating method of claim 25.

Claims (27)

ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムであって、
撮影領域内で使用者のゴルフショットに対する映像を取得する第1撮影ユニットと、
目標地点を含む領域を撮影する第2撮影ユニットと、
前記第1撮影ユニット及び第2撮影ユニットからそれぞれ撮影された映像を収集し、前記第1撮影ユニット及び第2撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、前記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像情報処理装置と、
を含む、ゴルフ映像情報自動生成システム。
A system for automatically generating golf video information based on a golf shot of a user at a golf course,
A first photographing unit for obtaining an image of a user's golf shot in a photographing region;
A second photographing unit for photographing an area including the target point;
Collecting images captured from each of the first imaging unit and the second imaging unit, determining an extraction interval of the images collected from each of the first imaging unit and the second imaging unit, A video information processing apparatus for automatically generating the golf video information by editing each video extracted by the extraction section according to a preset item;
System for automatically generating golf video information.
前記第1撮影ユニットは、ゴルフスイングする使用者の側面を撮影する第1カメラと前記ゴルフスイングする使用者の正面を撮影する第2カメラの少なくとも一つを含んでなり、前記第2撮影ユニットは、目標地点を含む領域を撮影する第3カメラと前記第3カメラとは違う視角で前記目標地点を含む領域を撮影する第4カメラの少なくとも一つを含んでなることを特徴とする、請求項1に記載のゴルフ映像情報自動生成システム。   The first photographing unit includes at least one of a first camera for photographing a side surface of a user who performs a golf swing and a second camera for photographing a front surface of the user who performs the golf swing. A third camera that captures an area that includes a target point and at least one of a fourth camera that captures an area that includes the target point at a different viewing angle from the third camera. The golf image information automatic generation system according to 1. 前記映像情報処理装置は、
前記第1撮影ユニット及び第2撮影ユニットの各カメラからそれぞれ撮影された映像を格納する格納部と、
前記第1撮影ユニット及び第2撮影ユニットの各カメラからそれぞれ撮影された映像を収集し、各カメラ別に区分して前記格納部に格納して管理する映像管理部と、前記ゴルフ映像情報の生成のための映像抽出区間を前記各カメラ別映像に対してそれぞれ決定し、前記決定された映像の抽出区間によって前記格納部に格納された各カメラ別映像のそれぞれから抽出された映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像編集部とを含む情報処理部を含み、
前記情報処理部は前記自動で生成されたゴルフ映像情報をサーバー又は前記使用者の個人端末機に伝送するように構成されることを特徴とする、請求項2に記載のゴルフ映像情報自動生成システム。
The video information processing apparatus
A storage unit for storing videos shot from the cameras of the first shooting unit and the second shooting unit;
A video management unit that collects videos shot from each camera of the first shooting unit and the second shooting unit, and stores and manages the videos in the storage unit; and the generation of the golf video information Video extraction sections for each camera-specific video are determined, and video extracted from each camera-specific video stored in the storage unit according to the determined video extraction section is preset. An information processing unit including a video editing unit that automatically generates the golf video information by editing according to matters,
The system for automatically generating golf video information according to claim 2, wherein the information processing unit is configured to transmit the automatically generated golf video information to a server or a personal terminal of the user. .
前記情報処理部は、前記第1撮影ユニットの映像に対する映像処理によってボールが打撃によって動くことを感知し、該当映像内でボールが打撃によって動くことを感知するとトリガー信号を発生するトリガー処理部をさらに含み、前記映像編集部は、前記トリガー処理部によってトリガー信号が発生する時点を基準に前記ゴルフ映像情報の生成のための映像抽出区間を前記各カメラ別映像に対してそれぞれ決定するように構成されることを特徴とする、請求項3に記載のゴルフ映像情報自動生成システム。   The information processing unit further includes a trigger processing unit that detects that the ball is moved by the hitting by the image processing on the image of the first photographing unit, and generates a trigger signal when the ball is moved by the hitting in the corresponding image. The video editing unit is configured to determine a video extraction section for generating the golf video information for each camera video based on a time point when the trigger signal is generated by the trigger processing unit. The golf video information automatic generation system according to claim 3, wherein: 前記情報処理部は前記使用者のゴルフスイングによってボールが打撃されるときに外部から伝送されるトリガー信号を受信し、前記映像編集部は前記外部からのトリガー信号受信時点を基準に前記ゴルフ映像情報の生成のための映像抽出区間を前記各カメラ別映像に対してそれぞれ決定するように構成されることを特徴とする、請求項3に記載のゴルフ映像情報自動生成システム。   The information processing unit receives a trigger signal transmitted from the outside when the ball is hit by the golf swing of the user, and the video editing unit is configured to receive the golf video information based on the trigger signal reception time from the outside. The system for automatically generating golf video information according to claim 3, wherein a video extraction section for generating an image is determined for each video for each camera. 前記情報処理部は、前記第1撮影ユニットの映像に対する映像処理によってボールが打撃によって動くことを感知し、該当映像内でボールが打撃によって動くことを感知するとトリガー信号を発生するトリガー処理部と、前記第2撮影ユニットの映像に対する映像処理によってボールを検出し、ボールの動きが止まった時点を決定するボールトラッキング処理部とをさらに含み、前記映像編集部は前記トリガー処理部によってトリガー信号が発生する時点及び前記ボールトラッキング処理部によって決定されるボールの動きが止まった時点を基準に前記ゴルフ映像情報の生成のための映像抽出区間を前記各カメラ別映像に対してそれぞれ決定するように構成されることを特徴とする、請求項3に記載のゴルフ映像情報自動生成システム。   The information processing unit senses that the ball is moved by hitting by image processing on the image of the first photographing unit, and generates a trigger signal when detecting that the ball moves by hitting in the corresponding image; A ball tracking processing unit that detects a ball by video processing on the video of the second photographing unit and determines when the movement of the ball stops, and the video editing unit generates a trigger signal by the trigger processing unit A video extraction section for generating the golf video information is determined for each camera-specific video on the basis of the time and the time when the movement of the ball determined by the ball tracking processing unit stops. The system for automatically generating golf video information according to claim 3, wherein: ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムであって、
ティーボックスに設置され、撮影領域内で使用者のゴルフショットに対する映像を取得し、前記ゴルフショットする使用者の側面を撮影する第1撮影ユニットと、
グリーンを含む領域を撮影する第2撮影ユニットと、
前記第1撮影ユニット及び第2撮影ユニットからそれぞれ撮影された映像を収集し、前記第1撮影ユニット及び第2撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、前記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像情報処理装置と、
を含む、ゴルフ映像情報自動生成システム。
A system for automatically generating golf video information based on a golf shot of a user at a golf course,
A first photographing unit that is installed in a tee box, obtains a video of a user's golf shot in a photographing region, and photographs a side of the user who makes the golf shot;
A second photographing unit for photographing an area including green;
Collecting images captured from each of the first imaging unit and the second imaging unit, determining an extraction interval of the images collected from each of the first imaging unit and the second imaging unit, A video information processing apparatus for automatically generating the golf video information by editing each video extracted by the extraction section according to a preset item;
System for automatically generating golf video information.
前記映像情報処理装置は、
前記第1撮影ユニット及び第2撮影ユニットからそれぞれ撮影された映像を格納する格納部と、
前記第1撮影ユニット及び第2撮影ユニットからそれぞれ撮影された映像を収集し、各撮影ユニット別に区分して前記格納部に格納して管理する映像管理部と、前記ゴルフ映像情報の生成のための映像抽出区間を前記各撮影ユニット別映像に対してそれぞれ決定し、前記決定された映像の抽出区間によって前記格納部に格納された各撮影ユニット別映像のそれぞれから抽出された映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像編集部とを含む情報処理部を含み、
前記情報処理部は前記自動で生成されたゴルフ映像情報をサーバー又は前記使用者の個人端末機に伝送するように構成されることを特徴とする、請求項7に記載のゴルフ映像情報自動生成システム。
The video information processing apparatus
A storage unit for storing images shot from the first shooting unit and the second shooting unit;
A video management unit that collects videos shot from each of the first shooting unit and the second shooting unit, and stores and manages the videos by each shooting unit; and for generating the golf video information A video extraction section is determined for each video unit-specific video, and video extracted from each video unit-specific video stored in the storage unit according to the determined video extraction section is preset. An information processing unit including a video editing unit that automatically generates the golf video information by editing according to matters,
The system for automatically generating golf video information according to claim 7, wherein the information processing unit is configured to transmit the automatically generated golf video information to a server or a personal terminal of the user. .
前記情報処理部は、前記第2撮影ユニットの映像に対する映像処理によってボールを検出し、ボールの動きが止まった時点を決定するボールトラッキング処理部をさらに含み、前記映像編集部は映像の分析又は外部信号入力によってトリガー信号が発生する時点及び前記ボールトラッキング処理部によって決定されるボールの動きが止まった時点を基準に前記ゴルフ映像情報の生成のための映像抽出区間を前記各撮影ユニット別映像に対してそれぞれ決定するように構成されることを特徴とする、請求項8に記載のゴルフ映像情報自動生成システム。   The information processing unit further includes a ball tracking processing unit that detects a ball by video processing on the video of the second photographing unit and determines when the movement of the ball stops, and the video editing unit analyzes video or externally A video extraction interval for generating the golf video information is defined for each video of each shooting unit based on a time point when a trigger signal is generated by signal input and a time point when the movement of the ball determined by the ball tracking processing unit stops. 9. The system for automatically generating golf video information according to claim 8, wherein the system is configured to determine each of them. 前記情報処理部は、前記第2撮影ユニットの映像から前記グリーン上のホールカップ又は前記ホールカップの旗竿を認識して前記グリーン上のホールカップの位置を実時間で感知するホールカップ位置感知部と、前記第2撮影ユニットの映像に対する映像処理によってボールの位置をトラッキングするボールトラッキング処理部とをさらに含み、前記ボールトラッキング処理部は、前記ホールカップ位置感知部によって感知されたホールカップの位置と前記トラッキングされたボールの位置を用いてホールインワンであるかの判断及び前記ボールと前記ホールカップ間の距離の算出の少なくとも一つを行うように構成され、前記映像編集部は、前記ボールトラッキング処理部によってホールインワンと判断された場合、前記生成されるゴルフ映像情報にホールインワン祝いのためのコンテンツを挿入し、前記ボールトラッキング処理部によって前記ボールと前記ホールカップ間の距離が算出された場合、前記生成されるゴルフ映像情報に前記算出されたボールとホールカップ間の距離を表示するようにすることを特徴とする、請求項8に記載のゴルフ映像情報自動生成システム。   The information processing unit recognizes a hole cup on the green or a flag pole of the hole cup from the image of the second photographing unit, and detects a position of the hole cup on the green in real time; A ball tracking processing unit that tracks the position of the ball by image processing on the image of the second photographing unit, the ball tracking processing unit including the position of the hole cup sensed by the hole cup position sensing unit, It is configured to perform at least one of determination of whether it is a hole-in-one using a tracked ball position and calculation of a distance between the ball and the hole cup, and the video editing unit is configured by the ball tracking processing unit. If it is determined as a hole-in-one, the generated golf When a content for hole-in-one celebration is inserted into the image information, and the distance between the ball and the hole cup is calculated by the ball tracking processing unit, the calculated ball and hole cup are included in the generated golf video information. The system for automatically generating golf video information according to claim 8, wherein a distance between them is displayed. ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムであって、
ティーボックスに設置され、撮影領域内で使用者のゴルフショットに対する映像を取得するティーボックス撮影ユニットと、
フェアウェイ上の一領域を撮影するように設置されるフェアウェイ撮影ユニットと、
前記ティーボックス撮影ユニット及びフェアウェイ撮影ユニットからそれぞれ撮影された映像を収集し、前記ティーボックス撮影ユニット及びフェアウェイ撮影ユニットのそれぞれから収集された映像の抽出区間を決定し、前記決定された映像の抽出区間によって抽出された各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像情報処理装置と、
を含む、ゴルフ映像情報自動生成システム。
A system for automatically generating golf video information based on a golf shot of a user at a golf course,
A tee box shooting unit that is installed in the tee box and acquires a video of the user's golf shot in the shooting area;
A fairway photography unit installed to photograph an area on the fairway;
Collecting images shot from the tea box shooting unit and the fairway shooting unit, respectively, determining an extraction interval of the images collected from the tea box shooting unit and the fairway shooting unit, and determining the determined image extraction interval A video information processing apparatus that automatically generates the golf video information by editing each video extracted by the method according to preset matters;
System for automatically generating golf video information.
前記フェアウェイ撮影ユニットは前記フェアウェイ上に前もって設定しておいた目標領域を撮影するように構成され、前記映像情報処理装置は前記フェアウェイ撮影ユニットから収集した映像を分析して該当映像でボールの位置を算出することによってゴルフラウンドする使用者のそれぞれが行ったゴルフショットによってボールが前記目標領域内に着地したかを判断するように構成され、その判断結果を前記使用者に知らせる又はサーバーに伝送して記録するようにすることを特徴とする、請求項11に記載のゴルフ映像情報自動生成システム。   The fairway photographing unit is configured to photograph a target area set in advance on the fairway, and the video information processing apparatus analyzes a video collected from the fairway photographing unit and determines a ball position in the corresponding video. By calculating, it is configured to determine whether the ball has landed in the target area by a golf shot performed by each user of the golf round, and informs the user of the determination result or transmits it to the server The golf video information automatic generation system according to claim 11, wherein recording is performed. 前記映像情報処理装置は、前記フェアウェイ撮影ユニットから収集した映像を分析して該当映像でボールの位置を算出することにより、ゴルフラウンドする使用者のうち最も長い飛距離を記録した使用者を判別する又は前記飛距離に基づいて前記使用者に対して順位を決定するように構成され、前記判別又は決定された結果を前記使用者に知らせる又はサーバーに伝送して記録するようにすることを特徴とする、請求項11に記載のゴルフ映像情報自動生成システム。   The video information processing apparatus determines a user who records the longest flight distance among golf round users by analyzing a video collected from the fairway photographing unit and calculating a position of the ball based on the video. Alternatively, it is configured to determine the rank for the user based on the flight distance, and the determination or determination result is notified to the user or transmitted to a server for recording. The golf video information automatic generation system according to claim 11. ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムであって、
ゴルフ場の特定ホールの一側に設置され、撮影領域内で使用者のゴルフショットに対する映像を取得する第1撮影ユニットと、
前記特定ホールの他側に設置され、パンチルトズーム駆動が可能であり、予め設定された事項によってズームイン、ズームアウト、及び上下及び左右の少なくとも一方への回転によるビュー変更の少なくとも一つを行って、前記使用者がゴルフショットすることによる映像を撮影するように構成される第2撮影ユニットと、
前記第1撮影ユニット及び第2撮影ユニットからそれぞれ撮影された映像を収集し、前記第1撮影ユニット及び第2撮影ユニットから収集されたそれぞれの映像から抽出された各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する映像情報処理装置と、
を含む、ゴルフ映像情報自動生成システム。
A system for automatically generating golf video information based on a golf shot of a user at a golf course,
A first shooting unit installed on one side of a specific hole of a golf course and acquiring an image of a user's golf shot in a shooting area;
It is installed on the other side of the specific hole and can be pan / tilt / zoom driven. A second shooting unit configured to take a picture of the user taking a golf shot;
Collecting images taken from the first and second imaging units, respectively, and extracting each image extracted from the first and second imaging units according to preset matters. A video information processing apparatus that automatically generates the golf video information by editing;
System for automatically generating golf video information.
前記第2撮影ユニットは、予め設定された第1倍率でズームインされて前記使用者のゴルフショットに対する映像を取得してから前記映像情報処理装置のトリガー信号又は外部から入力されるトリガー信号によって予め設定された第2倍率でズームアウトされ、目標地点を含む領域が撮影領域内に含まれるように上下及び左右ので少なくとも一方に回転して映像を撮影するように構成され、前記映像情報処理装置は、前記第1撮影ユニットから収集した映像で前記トリガー信号を基準に予め設定された区間に対して抽出した映像と前記第2撮影ユニットから収集した映像から前記トリガー信号を基準に前記ズームイン映像、前記ズームアウト映像及び上下及び左右の少なくとも一方に回転して撮影した前記目標地点を含む領域の映像を含むように抽出した映像とを結合することによって前記ゴルフ映像情報を自動で生成するように構成されることを特徴とする、請求項14に記載のゴルフ映像情報自動生成システム。   The second photographing unit is preliminarily set by a trigger signal of the video information processing apparatus or an externally input trigger signal after being zoomed in at a first preset magnification and acquiring an image of the user's golf shot. Zoomed out at the second magnification, and configured to capture a video by rotating at least one of up and down and left and right so that an area including the target point is included in the imaging area, The zoomed-in video and the zoom based on the trigger signal based on the video collected from the first photographing unit and the video extracted from the preset section based on the trigger signal and the video collected from the second photographing unit Out video and video of the area including the target point, which is rotated and photographed in at least one of up / down and left / right The golf video information, characterized in that it is configured to automatically generate, golf video information automatic generation system according to claim 14 by combining the the video extraction. ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムのゴルフ映像情報自動生成方法であって、
少なくとも一つのカメラを含む第1撮影ユニットによってその撮影領域内で使用者がゴルフショットすることに対して撮影される映像を収集して格納部に格納する段階と、
少なくとも一つのカメラを含む第2撮影ユニットによって目標地点を含む領域に対して撮影される映像を収集して前記格納部に格納する段階と、
前記第1撮影ユニット及び第2撮影ユニットのそれぞれから収集された映像の抽出区間を決定する段階と、
前記格納部に格納された各映像から前記決定された映像の抽出区間によって抽出した各映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する段階と、
を含む、ゴルフ映像情報自動生成方法。
A golf video information automatic generation method of a system for automatically generating golf video information by a golf shot of a user at a golf course,
Collecting and storing in a storage unit images captured by a first shooting unit including at least one camera for a golf shot of a user within the shooting area;
Collecting images stored in an area including a target point by a second imaging unit including at least one camera and storing the images in the storage unit;
Determining an extraction interval of video collected from each of the first and second imaging units;
Automatically generating the golf video information by editing each video extracted by the determined video extraction section from each video stored in the storage unit according to preset matters;
A method for automatically generating golf video information.
前記映像の抽出区間を決定する段階は、
前記第1撮影ユニットの映像に対する映像処理によってボールが打撃によって動くことを感知することによってトリガー信号が発生する時点又は前記使用者のゴルフスイングによってボールが打撃されるときに外部からのトリガー信号受信時点を決定する段階と、前記決定されたトリガー信号の発生時点又は受信時点を基準に前記ゴルフ映像情報の生成のための映像抽出区間を前記各撮影ユニットのカメラ別映像に対してそれぞれ決定する段階とを含むことを特徴とする、請求項16に記載のゴルフ映像情報自動生成方法。
The step of determining an extraction interval of the video includes
When a trigger signal is generated by detecting that the ball is moved by hitting by image processing on the image of the first photographing unit, or when a trigger signal is received from the outside when the ball is hit by the golf swing of the user Determining a video extraction section for generating the golf video information for each camera unit video based on the generation time or reception time of the determined trigger signal, and The method for automatically generating golf video information according to claim 16, comprising:
前記映像の抽出区間を決定する段階は、
前記第1撮影ユニットの映像に対する映像処理によってボールが打撃によって動くことを感知することによってトリガー信号が発生する時点又は前記使用者のゴルフスイングによってボールが打撃されるときに外部からのトリガー信号受信時点を決定する段階と、前記第2撮影ユニットの映像に対する映像処理によってボールを検出してボールの動きが止まった時点を決定する段階と、前記トリガー信号の発生時点又は受信時点及び前記ボールの動きが止まった時点を基準に前記ゴルフ映像情報の生成のための映像抽出区間を前記各撮影ユニットのカメラ別映像に対してそれぞれ決定する段階とを含むことを特徴とする、請求項16に記載のゴルフ映像情報自動生成方法。
The step of determining an extraction interval of the video includes
When a trigger signal is generated by detecting that the ball is moved by hitting by image processing on the image of the first photographing unit, or when a trigger signal is received from the outside when the ball is hit by the golf swing of the user Determining the time when the ball stops moving by detecting the ball by image processing on the image of the second photographing unit, and when the trigger signal is generated or received, and the movement of the ball The method according to claim 16, further comprising: determining a video extraction section for generating the golf video information with respect to the video for each camera of each shooting unit on the basis of the stop time. Video information automatic generation method.
前記第2撮影ユニットの映像に対する映像処理によってボールの位置をトラッキングする段階と、前記目標地点の位置と前記トラッキングされたボールの位置を用いて前記ボールと目標地点間の距離を算出する段階とをさらに含み、
前記ゴルフ映像情報を自動で生成する段階は、前記算出されたボールと目標地点間の距離情報を前記生成されるゴルフ映像情報に表示する段階を含むことを特徴とする、請求項16に記載のゴルフ映像情報自動生成方法。
Tracking the position of the ball by image processing on the image of the second photographing unit, and calculating the distance between the ball and the target point using the position of the target point and the position of the tracked ball. In addition,
The method of claim 16, wherein the step of automatically generating the golf video information includes a step of displaying distance information between the calculated ball and a target point on the generated golf video information. Golf video information automatic generation method.
前記第1撮影ユニットは、ティーボックスに設置され、ゴルフショットする使用者の側面を撮影するカメラを含むように構成され、
前記映像の抽出区間を決定する段階は、
前記第1撮影ユニットの映像で前記ティーボックスに設置された少なくとも一つのティーマーカーを認識し、前記認識された少なくとも一つのティーマーカーを基準に予め設定された大きさの関心領域を設定する段階と、複数のフレームの映像から前記設定された関心領域に対応する映像を抽出し、差映像分析によって打撃されたボールが動くことを感知することによってトリガー信号を発生させる段階と、前記トリガー信号が発生した時点を基準に前記ゴルフ映像情報の生成のための映像抽出区間を前記各撮影ユニットのカメラ別映像に対してそれぞれ決定する段階とを含むことを特徴とする、請求項16に記載のゴルフ映像情報自動生成方法。
The first photographing unit is installed in a tee box and configured to include a camera that photographs a side surface of a user who makes a golf shot,
The step of determining an extraction interval of the video includes
Recognizing at least one tee marker installed in the tee box from an image of the first photographing unit, and setting a region of interest having a preset size based on the recognized at least one tee marker; Extracting a video image corresponding to the set region of interest from a plurality of frames, generating a trigger signal by detecting movement of a ball hit by a differential video analysis, and generating the trigger signal The method according to claim 16, further comprising: determining a video extraction section for generating the golf video information for each video of each shooting unit based on a point of time when the golf video information is generated. Automatic information generation method.
前記第2撮影ユニットはグリーンを含む領域を撮影するカメラを含むように構成され、
前記第2撮影ユニットの映像に対する映像処理によってボールの位置をトラッキングする段階と、前記グリーン上のホールカップの位置と前記トラッキングされたボールの位置を用いてホールインワンであるかを判断する又は前記ボールと前記ホールカップ間の距離を算出する段階とをさらに含み、
前記ゴルフ映像情報を自動で生成する段階は、
前記ボール位置のトラッキング結果、ホールインワンであると判断された場合、前記生成されるゴルフ映像情報にホールインワン祝いのためのコンテンツを挿入し、前記ボール位置のトラッキング結果、ホールインワンではない場合、前記生成されるゴルフ映像情報に前記算出されたボールとホールカップ間の距離を表示する段階をさらに含むことを特徴とする、請求項16に記載のゴルフ映像情報自動生成方法。
The second photographing unit is configured to include a camera for photographing a region including green,
Tracking the position of the ball by image processing on the image of the second photographing unit, and determining whether it is a hole-in-one using the position of the hole cup on the green and the position of the tracked ball; Calculating a distance between the hole cups,
The step of automatically generating the golf video information includes:
If the result of tracking the ball position is determined to be hole-in-one, content for hole-in-one celebration is inserted into the generated golf video information, and if the result of tracking the ball position is not hole-in-one, the generated is generated. The method of claim 16, further comprising displaying the calculated distance between the ball and the hole cup in the golf video information.
前記第2撮影ユニットはグリーンを含む領域を撮影するカメラを含むように構成され、
ゴルフラウンドする各使用者のゴルフショットに対してそれぞれ前記第2撮影ユニットの映像に対する映像処理によってボールの位置をトラッキングする段階と、前記グリーン上のホールカップの位置と前記トラッキングされたボールの位置を用いて前記ゴルフラウンドする各使用者のゴルフショットに対して前記ホールカップにボールが最も近接した場合を判断する段階とをさらに含み、
前記ゴルフ映像情報を自動で生成する段階は、
前記ホールカップにボールが最も近接した場合であると判断された使用者のゴルフショットについてのゴルフ映像情報にニアリスト祝いのためのコンテンツを挿入する段階をさらに含むことを特徴とする、請求項16に記載のゴルフ映像情報自動生成方法。
The second photographing unit is configured to include a camera for photographing a region including green,
Tracking the position of the ball by image processing for the image of the second shooting unit for each golf shot of each user who makes a golf round, and the position of the hole cup on the green and the position of the tracked ball And determining when the ball is closest to the hole cup with respect to each user's golf shot using the golf shot,
The step of automatically generating the golf video information includes:
17. The method of claim 16, further comprising inserting a content for a near list celebration into golf video information about a user's golf shot determined to be when the ball is closest to the hole cup. The golf image information automatic generation method according to claim 1.
前記第2撮影ユニットはグリーンを含む領域を撮影するカメラを含むように構成され、
前記第2撮影ユニットの映像から前記グリーン上のホールカップ又は前記ホールカップの旗竿を認識して前記グリーン上のホールカップの位置を実時間で感知する段階と、前記第2撮影ユニットの映像に対する映像処理によってボールの位置をトラッキングする段階と、前記実時間感知によって決定される前記ホールカップの位置と前記トラッキングされたボールの位置を用いてホールインワンであるかの判断及び前記ボールと前記ホールカップ間の距離の算出の少なくとも一つを行う段階をさらに含み、
前記ゴルフ映像情報を自動で生成する段階は、
前記ホールインワンであるかの判断又は前記ボールとホールカップ間の距離算出の結果を前記ゴルフ映像情報に表示する段階をさらに含むことを特徴とする、請求項16に記載のゴルフ映像情報自動生成方法。
The second photographing unit is configured to include a camera for photographing a region including green,
Recognizing the hole cup on the green or the flag cup of the hole cup from the image of the second shooting unit and detecting the position of the hole cup on the green in real time; and the image of the image of the second shooting unit Tracking the position of the ball by processing, determining whether it is a hole-in-one using the position of the hole cup determined by the real-time sensing and the position of the tracked ball, and between the ball and the hole cup Further comprising performing at least one of the distance calculations;
The step of automatically generating the golf video information includes:
17. The golf video information automatic generation method according to claim 16, further comprising a step of displaying on the golf video information a determination as to whether the hole is in one or calculating a distance between the ball and the hole cup.
ゴルフ場における使用者のゴルフショットによるゴルフ映像情報を自動で生成するシステムのゴルフ映像情報自動生成方法であって、
ゴルフ場の特定ホールの一側に設置された第1撮影ユニットによって撮影される使用者のゴルフショットに対する映像を収集して格納部に格納する第1撮影ユニット映像収集及び格納段階と、
前記特定ホールの他側に設置され、パンチルトズーム駆動の可能な第2撮影ユニットによってズームイン、ズームアウト、及び上下及び左右の少なくとも一方への回転によるビュー変更の少なくとも一つを行って前記使用者がゴルフショットすることによって撮影される映像を収集して前記格納部に格納する第2撮影ユニット映像収集及び格納段階と、
前記第1撮影ユニットから抽出された第1抽出映像及び第2撮影ユニットから抽出された第2抽出映像を予め設定された事項によって編集することによって前記ゴルフ映像情報を自動で生成する段階と、
を含む、ゴルフ映像情報自動生成方法。
A golf video information automatic generation method of a system for automatically generating golf video information by a golf shot of a user at a golf course,
A first shooting unit image collection and storage stage for collecting images of a user's golf shots shot by a first shooting unit installed on one side of a specific hole of a golf course and storing them in a storage unit;
The user may perform at least one of zooming in, zooming out, and changing the view by rotating to at least one of up / down and left / right by a second photographing unit that is installed on the other side of the specific hole and is capable of pan / tilt / zoom driving. A second shooting unit video collecting and storing step of collecting video stored by golf shot and storing the video in the storage unit;
Automatically generating the golf video information by editing the first extracted video extracted from the first shooting unit and the second extracted video extracted from the second shooting unit according to preset matters;
A method for automatically generating golf video information.
前記第2撮影ユニット映像収集及び格納段階は、
前記第2撮影ユニットによって予め設定された第1倍率でズームインされた基本状態で前記使用者のゴルフショットに対する映像を取得する段階と、映像情報処理装置のトリガー信号又は外部から入力されるトリガー信号によって前記第2撮影ユニットが前記基本状態で予め設定された第2倍率でズームアウトされながら映像を取得する段階と、前記第2撮影ユニットが上下及び左右の少なくとも一方に回転駆動され、前記目標地点の位置情報を認識して前記目標地点を含む領域に対する映像を取得する段階と、前記それぞれの取得される映像を前記映像情報処理装置によって収集して前記格納部に格納する段階とを含むことを特徴とする、請求項24に記載のゴルフ映像情報自動生成方法。
The second shooting unit image collection and storage step includes:
Acquiring a video of the user's golf shot in a basic state zoomed in at a first magnification set in advance by the second photographing unit, and a trigger signal of the video information processing apparatus or a trigger signal input from the outside Acquiring the image while the second photographing unit is zoomed out at a second magnification set in advance in the basic state; and the second photographing unit is driven to rotate at least one of up and down and left and right. Recognizing position information and acquiring videos for an area including the target point, and collecting the respective acquired videos by the video information processing apparatus and storing them in the storage unit. The method for automatically generating golf video information according to claim 24.
前記ゴルフ映像情報を自動で生成する段階は、
前記第1撮影ユニットから収集した映像から前記トリガー信号を基準に予め設定された区間に対する映像を抽出する段階と、前記第2撮影ユニットから収集した映像から前記トリガー信号を基準に前記ズームイン映像、前記ズームアウト映像及び上下及び左右の少なくとも一方に回転して撮影した前記目標地点を含む領域の映像を含むように映像を抽出する段階と、前記各抽出された映像を結合することによって又は前記各抽出された映像を結合し、その結合された映像に予め設定されたコンテンツを挿入する又は前記各抽出された映像に対して予め設定された映像処理をすることによって前記ゴルフ映像情報を自動で生成する段階とを含むことを特徴とする、請求項25に記載のゴルフ映像情報自動生成方法。
The step of automatically generating the golf video information includes:
Extracting a video for a preset section based on the trigger signal from the video collected from the first photographing unit; and the zoom-in video based on the trigger signal from the video collected from the second photographing unit; Extracting a video so as to include a zoomed-out video and a video of an area including the target point rotated and rotated at least one of up and down and left and right, and combining each of the extracted videos or each of the extractions The golf video information is automatically generated by combining the combined videos and inserting preset content into the combined videos or by performing preset video processing on each of the extracted videos The method for automatically generating golf video information according to claim 25, further comprising:
前記ゴルフ映像情報を自動で生成する段階は、
前記第1撮影ユニットから収集した映像から前記トリガー信号を基準に予め設定された区間に対する映像を抽出する段階と、前記第2撮影ユニットから収集した映像から前記トリガー信号を基準に前記ズームイン映像、前記ズームアウト映像、前記上下及び左右の少なくとも一方に回転して撮影した前記目標地点を含む領域の映像及び前記目標地点を含む領域の映像に対して前記目標地点の位置によって決定される倍率でズームインした映像を含むように映像を抽出する段階と、前記各抽出された映像を結合することによって又は前記各抽出された映像を結合し、その結合された映像に予め設定されたコンテンツを挿入する又は前記各抽出された映像に対して予め設定された映像処理をすることによって前記ゴルフ映像情報を自動で生成する段階とを含むことを特徴とする、請求項25に記載のゴルフ映像情報自動生成方法。
The step of automatically generating the golf video information includes:
Extracting a video for a preset section based on the trigger signal from the video collected from the first photographing unit; and the zoom-in video based on the trigger signal from the video collected from the second photographing unit; Zoomed in at a magnification determined by the position of the target point with respect to the zoomed-out image, the image of the region including the target point and the image of the region including the target point, rotated and photographed at least one of up and down and left and right Extracting a video to include a video and combining the extracted videos or combining the extracted videos and inserting preset content in the combined video; or The golf video information is automatically generated by performing preset video processing on each extracted video. Characterized in that it comprises a floor, a golf video information automatically generating method according to claim 25.
JP2018517854A 2015-11-04 2016-11-03 Golf video information automatic generation system and golf video information automatic generation method Active JP6596746B2 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2015-0154275 2015-11-04
KR1020150154275A KR101738420B1 (en) 2015-11-04 2015-11-04 System and method for automatically creating image information on golf
PCT/KR2016/012606 WO2017078435A1 (en) 2015-11-04 2016-11-03 Golf image information automatic generation system and golf image information automatic generation method

Publications (2)

Publication Number Publication Date
JP2019501550A true JP2019501550A (en) 2019-01-17
JP6596746B2 JP6596746B2 (en) 2019-10-30

Family

ID=58662958

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018517854A Active JP6596746B2 (en) 2015-11-04 2016-11-03 Golf video information automatic generation system and golf video information automatic generation method

Country Status (4)

Country Link
JP (1) JP6596746B2 (en)
KR (1) KR101738420B1 (en)
CN (1) CN108293151B (en)
WO (1) WO2017078435A1 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102109971B1 (en) * 2018-10-29 2020-05-12 주식회사 크리에이츠 Method, system and non-transitory computer-readable recording medium for supporting shooting a golf swing
KR102180108B1 (en) * 2019-02-25 2020-11-17 양창오 Golf memorial image providing system and providing method
CN112463823A (en) * 2021-02-02 2021-03-09 深圳市前海泛美图像技术有限公司 Method for calculating distance from golf code point to hole cup and related product
KR102613027B1 (en) * 2022-02-28 2023-12-12 김기표 Tracking system for position of golf ball

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1995033334A1 (en) * 1994-05-30 1995-12-07 Makoto Hyuga Imaging method and its apparatus
JPH09239089A (en) * 1996-03-04 1997-09-16 Masayuki Oguri Golf information system
JP2004173202A (en) * 2002-11-22 2004-06-17 Canon Inc Image recorder
JP2009159515A (en) * 2007-12-27 2009-07-16 Akira Kudo Hole-in-one verification system
JP2015103832A (en) * 2013-11-21 2015-06-04 カシオ計算機株式会社 Portable apparatus, imaging apparatus, photographing control system, photographing control method, and program

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4858840B2 (en) * 2006-12-28 2012-01-18 章 工藤 Hole-in-one and near-pin certification system
KR20090021407A (en) * 2007-08-27 2009-03-04 마이크로 인스펙션 주식회사 Apparatus for measuring motion of golf ball and control method thereof
KR101098101B1 (en) * 2009-05-26 2011-12-26 최성열 Method for providing golf game online
KR101096157B1 (en) * 2009-10-22 2011-12-19 (주)태종씨앤아이 watching apparatus using dual camera
KR100970675B1 (en) * 2009-11-30 2010-07-15 (주) 골프존 Virtual golf simulation device and system including the same, and method for virtual golf simulation
KR101356595B1 (en) * 2013-01-17 2014-02-04 (주) 골프존 Information providing system for golf swing image realized in golf course and disposing device and information providing method for golf swing image used to the same

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1995033334A1 (en) * 1994-05-30 1995-12-07 Makoto Hyuga Imaging method and its apparatus
JPH09239089A (en) * 1996-03-04 1997-09-16 Masayuki Oguri Golf information system
JP2004173202A (en) * 2002-11-22 2004-06-17 Canon Inc Image recorder
JP2009159515A (en) * 2007-12-27 2009-07-16 Akira Kudo Hole-in-one verification system
JP2015103832A (en) * 2013-11-21 2015-06-04 カシオ計算機株式会社 Portable apparatus, imaging apparatus, photographing control system, photographing control method, and program

Also Published As

Publication number Publication date
CN108293151A (en) 2018-07-17
KR101738420B1 (en) 2017-05-22
WO2017078435A1 (en) 2017-05-11
CN108293151B (en) 2020-12-04
JP6596746B2 (en) 2019-10-30
KR20170052164A (en) 2017-05-12

Similar Documents

Publication Publication Date Title
JP6596746B2 (en) Golf video information automatic generation system and golf video information automatic generation method
US11941915B2 (en) Golf game video analytic system
US9473748B2 (en) Video tracking of baseball players to determine the end of a half-inning
KR102045439B1 (en) Virtual tennis simulation system, sensing device and method for sensing process using the same
US20190087661A1 (en) Methods and systems for ball game analytics with a mobile device
US10486043B2 (en) Sensing device and sensing method used in baseball practice apparatus, baseball practice apparatus using the sensing device and the sensing method, and method of controlling the baseball practice apparatus
US9162132B2 (en) Virtual golf simulation apparatus and sensing device and method used for the same
US9007463B2 (en) Video tracking of baseball players which identifies merged participants based on participant roles
JP6555699B2 (en) Golf swing video information providing system, camera device for providing golf swing video information, and golf swing video information providing method
US20190201794A1 (en) Experience-oriented virtual baseball game apparatus and virtual baseball game control method using the same
JP2006185109A (en) Image measurement device and image measurement method
JP4121973B2 (en) Scene extraction system and scene extraction method
KR101705836B1 (en) System and Method for analyzing golf swing motion using Depth Information
JP2018522450A (en) Camera, method and system for shooting golf games
KR101703316B1 (en) Method and apparatus for measuring velocity based on image
KR101862145B1 (en) Sensing device for calculating information on golf shot of user and sensing method using the same
JP7111433B2 (en) SENSING DEVICE FOR MOTION OF BALL AND SENSING METHOD THEREOF
JP7048347B2 (en) Positional relationship determination device
JP7420377B2 (en) How to create a tennis technique improvement support database and a tennis technique improvement support system
US11103763B2 (en) Basketball shooting game using smart glasses
JP7304747B2 (en) Image processing device, control method and control program
JP2021197110A (en) Tactile sense metadata generation device, video tactile sense interlocking system, and program
CN114565641A (en) Image recognition method, device, equipment, system and storage medium
JP2022068308A (en) Positional relation determination apparatus
KR20220087330A (en) Unmanned shooting system for sports events by detecting dynamic objects using deep learning

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180420

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180420

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190415

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190423

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190723

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190903

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190910

R150 Certificate of patent or registration of utility model

Ref document number: 6596746

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250