JP2018005913A - ボールの画像の明るさを補正するための方法、システム、及び非一時的なコンピュータ読み取り可能な記録媒体 - Google Patents

ボールの画像の明るさを補正するための方法、システム、及び非一時的なコンピュータ読み取り可能な記録媒体 Download PDF

Info

Publication number
JP2018005913A
JP2018005913A JP2017126195A JP2017126195A JP2018005913A JP 2018005913 A JP2018005913 A JP 2018005913A JP 2017126195 A JP2017126195 A JP 2017126195A JP 2017126195 A JP2017126195 A JP 2017126195A JP 2018005913 A JP2018005913 A JP 2018005913A
Authority
JP
Japan
Prior art keywords
brightness
image
ball
distribution
correcting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017126195A
Other languages
English (en)
Other versions
JP7076955B2 (ja
Inventor
ヨン ホ スク
Yong Ho Suk
ヨン ホ スク
ジェイ ホ スク
Jey Ho Suk
ジェイ ホ スク
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Creatz Inc
Original Assignee
Creatz Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Creatz Inc filed Critical Creatz Inc
Publication of JP2018005913A publication Critical patent/JP2018005913A/ja
Application granted granted Critical
Publication of JP7076955B2 publication Critical patent/JP7076955B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration by the use of more than one image, e.g. averaging, subtraction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/02Picture taking arrangements specially adapted for photogrammetry or photographic surveying, e.g. controlling overlapping of pictures
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B69/00Training appliances or apparatus for special sports
    • A63B69/36Training appliances or apparatus for special sports for golf
    • A63B69/3658Means associated with the ball for indicating or measuring, e.g. speed, direction
    • G06T5/94
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/223Analysis of motion using block-matching
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/71Circuitry for evaluating the brightness variation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/76Circuitry for compensating brightness variation in the scene by influencing the image signals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30204Marker
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30221Sports video; Sports image
    • G06T2207/30224Ball; Puck
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30241Trajectory

Abstract

【課題】好適なボールの画像の明るさを補正するための方法を提供すること。
【解決手段】本発明の一態様によると、ボールの画像の明るさを補正するための方法であって、物理量測定の対象となるボールを撮影した複数の画像それぞれにおいて、前記ボールに該当する領域の撮影された明るさの分布を算出するステップと、基準の明るさの分布を参照して、前記複数の画像のうち少なくとも一つの画像の前記ボールに該当する領域の撮影された明るさの分布を補正するステップを含む方法が提供される。
【選択図】図3

Description

本発明は、ボールの画像の明るさを補正するための方法、システム、及び非一時的なコンピュータ読み取り可能な記録媒体{METHOD、SYSTEM AND NON−TRANSITORY COMPUTER−READABLE RECORDING MEDIUM FOR COMPENSATING BRIGHTNESS OF BALL IMAGES}に関するものである。
[発明の背景となる技術]
ゴルファーが都心などでも低コストで仮想的にゴルフを楽しむことができるようにするシミュレーションゴルフシステムが広く普及されている。このようなシミュレーションゴルフシステムは、ゴルファーがゴルフボールを打ったら、ゴルフボールを撮影した画像を多数獲得し、その軌跡、間隔、サイズなどに基づいて、ゴルフボールの物理量を測定し、シミュレーションを行い、ショットのシミュレーション結果をスクリーン上に表示することを基本コンセプトとすることができる。これらのシミュレーションゴルフのシステムでは、ゴルフボールの撮影された画像を可能な限り良好な状態で獲得することが重要である。
これに関連し、特許文献1(発明の名称:照明制御を利用したゴルフ映像獲得装置、及び、それを利用した画像処理ベースのゴルフ練習システム)は、照明の位置や色を調節しながらゴルフ練習シーンを撮影することにより、ゴルフボールの画像をより多様に獲得する技術について開示されている(前記韓国公開特許公報の明細書は、その全体として本明細書に編入されたものとみなされるべきである)。しかし、この技術を含むいくつかの従来技術は、ゴルフボールの物理量を正確に測定するのに必要なゴルフボールの画像を効率的に獲得するのに必要な技術や複数のゴルフボールの画像から得られるマークシーケンス(Mark Sequence)を利用してゴルフ ボールの物理量を測定する技術について関心を示していないことは事実である。
したがって、本発明者(ら)は、短い時間の間に多くのフレームの画像を撮影できる高速カメラからゴルフボールの画像を効率的に獲得し、その獲得されたゴルフボールの画像で表示されるマークシーケンスを分析することにより、ゴルフボールの物理量を正確に測定するための新しい技術について提案するものである。
韓国公開特許公報第10-2009-0112538号
本発明は、複数のゴルフボールの画像で表示されるマークシーケンスを分析して、ゴルフボールの回転速度と回転方向を測定することをその目的とする。
また、本発明は複数のゴルフボール画像の明るさ(具体的には、明るさの分布)を補正することにより、複数のゴルフボール画像の明るさの分布が均一になるようにすることを他の目的とする。
前記目的を達成するための本発明の代表的な構成は、以下の通りである。
本発明の一態様によると、ボールの画像の明るさを補正するための方法であって、物理量測定の対象となるボールを撮影した複数の画像それぞれにおいて、前記ボールに該当する領域の撮影された明るさの分布を算出するステップ、
及び基準の明るさの分布を参照にして、前記複数の画像のうち少なくとも一つの画像の前記ボールに該当する領域の撮影された明るさの分布を補正するステップとを含む方法が提供される。
本発明の他の態様によると、ボールの画像の明るさを補正するためのシステムであって、物理量測定の対象となるボールを撮影した複数の画像を取得する画像取得部、及び前記複数の画像それぞれにおいて、前記ボールに該当する領域の撮影された明るさの分布を算出し、基準の明るさの分布を参照にして、前記複数の画像のうち少なくとも一つの画像の前記ボールに該当する領域の撮影された明るさの分布を補正する画像補正部とを含むシステムが提供される。
この他にも、本発明を実施するための他の方法、システム、及び非一時的なコンピュータ読み取り可能な記録媒体が提供される。
本発明によれば、それぞれのゴルフボール画像内だけでなく、複数のゴルフボールの画像に渡って明るさの分布を均一化することができるので、複数のゴルフボールの画像で表示されるマークシーケンスをより正確に検出する効果を達成することができる。
本発明によれば、複数のゴルフボールの画像にわたって表示されるマーク(Mark)の時系列的な集合(つまり、マークシーケンス)を利用して、ゴルフボールの回転速度と回転方向を正確に測定する効果を達成することができる。
図1は、本発明の一実施形態に係るシミュレーションゴルフシステムの全体的な構成を概略的に示す図である。 図2は、本発明の一実施形態に係る撮影装置(100)の内部構成を詳細に示す図である。 図3は、本発明の一実施形態に係るシミュレータ(200)の内部構成を詳細に示す図である。 図4は、本発明の一実施例に基づいて実際に撮影されたゴルフボールの画像を例示的に示す図である。 図5は、本発明の一実施例に基づいてゴルフボールの画像に適用することができる補正モデルを視覚的に示す図である。 図6は、本発明の一実施例に基づいて明るさが補正されたゴルフボールの画像を例示的に示す図である。
[発明を実施するための具体的な内容]
後述する本発明の詳細な説明は、本発明が実施されることができる特定の実施例を例示として示す添付図面を参照する。これらの実施例は、当業者が本発明を実施できるよう十分に詳細に説明される。本発明の様々な実施例は、互いに異なるが、相互に排他的である必要はないことが理解されるべきである。例えば、本明細書に記載されている特定の形状、構造、及び特性は、本発明の精神と範囲を逸脱しないのに一実施例から、他の実施例に変更されて実装されることができる。また、それぞれの実施例内の個々の構成要素の位置または配置も、本発明の精神と範囲を逸脱しなく変更できることが理解されるべきである。したがって、後述する詳細な説明は、限定的な意味として行われるものではなく、本発明の範囲は、特許請求の範囲の請求項が請求する範囲とその均等なすべての範囲を網羅するものとして受け入れられなければならない。図面で同様の参照符号は、いくつかの側面に亘って同一または類似の構成要素を示す。
以下では、本発明が属する技術分野で通常の知識を有する者が本発明を容易に実施できるようにするために、本発明のいくつかの好ましい実施形態について添付された図面を参照して詳細に説明する。
[本発明の好ましい実施例]
システム全体の構成
図1は、本発明の一実施形態に係るシミュレーションゴルフシステムの全体的な構成を概略的に示す図である。
図1に示すように、シミュレーションゴルフシステムは打撃部(10)、照明装置(20)、撮影装置(100)、シミュレータ(200)と表示装置(300)を含んで構成されることがある。
まず、本発明の一実施形態に係る打撃部(10)は、ゴルファーが、シミュレーションゴルフシステムを利用する際に足を掛け、上がってゴルフボールを置いて打つ部分であることがある。このような打撃部(10)は、その傾斜角が調節されることがある公知のスイングプレートを含むことができる。ちなみに、当業者は、本発明は他の種類の仮想スポーツシステムに適用される場合には、打撃部(10)の構成を、必要に応じてそれと一緒に連動する他の構成要素の構成と共に当該スポーツの特性に合わせ適切に変更することができる。
次に、本発明の一実施形態に係る照明装置(20)は、ゴルファーが室内や屋外でのシミュレーションゴルフを楽しむ場合に人為的に光を照射することができる装置であることがある。このようなの照明装置(20)は、必要に応じてオンまたはオフになったり、その明るさが調節されることができる。好ましくは、照明装置(20)は光の震え現象によるゴルフボールの画像の自然な劣化を防ぐための赤外線照明であることがある。
次に、本発明の一実施形態に係る撮影装置(100)は、少なくとも一つのカメラ(例えば、高速カメラ)(未図示)を含み、ゴルフボールの画像(例えば、運動しているゴルフボールの画像)を複数の獲得する機能を実行することができる。これらの撮影装置(100)は、図1に示すように運動するゴルフボールを上から下に見下ろす位置に配置されることもあるが、その他の別の場所に配置することもできる。
また、本発明の一実施形態に係る撮影装置(100)は、ショットの準備が完了した状態での物理量測定の対象となる球の位置を認識し、球の予想移動方向と球を撮影するカメラの位置のうちの少なくとも一つと、球の位置を参照にして、球の様子を含む画像を取得するために実行される撮影の対象となる関心領域(Region Of Interest)を動的に決定することで、球の物理量を正確に測定するのに必要な複数のゴルフボールの画像を効率的に獲得(つまり、撮影)する機能を実行することができる。
本発明の一実施例によると、ゴルフボールの画像は、そのゴルフボールの表面に表示されている所定のマークが鮮明に現れていて、そのマークの形状や位置を特定するのに良いものほど、より良好なものとすることができる。例えば、ゴルフボールの画像の球に該当する領域に表示されたマークがより鮮明な場合、後述するようなシミュレータ(200)が多数のゴルフボールの画像にわたって表示されるマークの時系列的な集合であるマークシーケンスをより正確にキャッチしてゴルフボールの回転速度と回転方向をより正確に計算することができる。
前記のような撮影装置(100)の具体的な構成については、図2を参照して、下で更に説明することにする。
次に、本発明の一実施形態に係るシミュレータ(200)は、物理量測定の対象となる球を撮影した複数の画像を撮影装置(100)から取得して、複数のゴルフボールの画像にわたって表示されるマークの時系列的な集合(つまり、マークシーケンス)を分析することにより、ゴルフボールの回転速度と回転方向を測定する機能をさらに実行することができる。
また、本発明の一実施形態に係るシミュレータ(200)は、前記のように測定されるゴルフボールの回転速度と回転方向に関する情報に基づいて、仮想現実でゴルフボールの運動を実現することができる。
一方、本発明の一実施形態に係るシミュレータ(200)は、撮影装置(100)と表示装置(300)との通信をすることができ、シミュレーションゴルフのシミュレーションのための専用のプロセッサを含むことがある。これらの専用プロセッサは、メモリ手段を備えて数値演算能力とグラフィックス処理能力を備えたものであることがある。
前記のようなシミュレータ(200)の構成については、図3を参照して、下で更に説明することにする。
最後に、本発明の一実施形態に係る表示装置(300)は、シミュレータ(200)の物理量の測定、仮想現実の実装の結果を表示してくれる機能を実行することができる。これらの表示装置(300)は、所定のディスプレイ手段を介して所定の映像を表示することができるが、例えば、打撃されたゴルフボールの衝撃を吸収する一方、直接発光しないスクリーンと、このようなスクリーンに映像を出力するプロジェクターで構成されることができる。
撮影装置の構成
下では、本発明の一実施形態に係る撮影装置(100)の内部構成と、各構成要素の機能について見てみることにする。
図2は、本発明の一実施形態に係る撮影装置(100)の内部構成を詳細に示す図である。
図2に示すように、撮影装置(100)は、カメラ部(110)、通信部(120)、制御部(130)とを含んで構成されることができる。
本発明の一実施例によると、カメラ部(110)、通信部(120)と制御部(130)は、そのうちの少なくとも一部がシミュレータ(200)と通信するためのプログラムモジュールであることがある。これらのプログラムモジュールは、オペレーティングシステム、アプリケーション、モジュール、または他のプログラムモジュールの形で撮影装置(100)に含まれることがあり、物理的には、いくつか公知の記憶装置に保存されることがある。また、これらのプログラムモジュールは、撮影装置(100)と通信可能なリモート記憶装置に保存されることもある。一方、これらのプログラムモジュールは、本発明に基づいて、後述する特定の業務を実行したり、特定の抽象データ型を実行するルーチン、サブルーチン、プログラム、オブジェクト、コンポーネント、データ構造などを包括するが、これに限定されない。
まず、本発明の一実施形態に係るカメラ部(110)は、光学的に複数の画像を取得することができる少なくとも一つのカメラを含むことがある。例えば、本発明の一実施形態に係るカメラ部(110)は、1秒あたりの数十フレームの画像を撮影できる高速カメラや超高速カメラを含むことができる。
次に、本発明の一実施形態に係る通信部(120)は、必要に応じて制御部(130)とシミュレータ(200)との間のデータ送受信を媒介する機能を実行することがある。本発明の一実施例によると、通信部(120)が取ることができる通信方式に特別な制限はないが、有線LAN通信、ケーブル通信などの有線通信方式や無線LAN通信、赤外線通信、RF通信、ブルートゥース通信などのような無線通信方式が好ましいことがある。
最後に、本発明の一実施形態に係る制御部(130)は、カメラ部(110)と通信部(120)との間のデータの流れを制御する機能を実行することができる。すなわち、本発明に係る制御部(130)は、撮影装置(100)の外部からの/へのデータフローや撮影装置(100)の各構成要素間のデータフローを制御することにより、カメラ部(110)と通信部(120 )で、それぞれ固有の機能を実行するように制御することができる。
シミュレータの構成
下では、本発明の一実施形態に係るシミュレータ(200)の内部構成と、各構成要素の機能について見てみることにする。
図3は、本発明の一実施形態に係るシミュレータ(200)の内部構成を詳細に示す図である。
図3に示すように、本発明の一実施形態に係るシミュレータ(200)は、画像処理部(210)、物理量測定部(220)、シミュレーション部(230)、データベース(240)、通信部(250)、制御部(260)とを含んで構成されることができる。また、本発明の一実施例によると、画像処理部(210)は、画像取得部(未図示)と画像補正部(未図示)を含むことができる。本発明の一実施例によると、画像処理部(210)、物理量測定部(220)、シミュレーション部(230)、データベース(240)、通信部(250)、制御部(260)は、そのうちの少なくとも一部が撮影装置(100)や表示装置(300)と通信するプログラムモジュールであることがある。これらのプログラムモジュールは、オペレーティングシステム、アプリケーション、モジュール、または他のプログラムモジュールの形でシミュレータ(200)に含まれることがあり、物理的にはいくつかの公知の記憶装置に保存されることがある。また、これらのプログラムモジュールはシミュレータ(200)と通信可能なリモート記憶装置に保存することもある。一方、これらのプログラムモジュールは、本発明に基づいて、後述する特定の業務を実行したり、特定の抽象データ型を実行するルーチン、サブルーチン、プログラム、オブジェクト、コンポーネント、データ構造などを包括するが、これに限定されない。
一方、シミュレータ(200)について前記のように説明したが、これらの説明は、例示的なものであり、シミュレータ(200)に要求される機能や構成要素の一部または全てが必要に応じて、撮影装置(100)で実現されるか含まれる場合があるとのことは当業者に自明である。
まず、本発明の一実施例によると、画像処理部(210)(具体的には、画像取得部)は、前記の撮影装置(100)から、物理量測定の対象となる球を撮影した複数の画像を獲得する機能を実行することができる。
図4は、本発明の一実施例に基づいて実際に撮影されたゴルフボールの画像を例示的に示す図である。
図4を参照すると、照明の位置、光照射の方向や光の光度、カメラの位置、仕様や設定、ボールの位置や色などの様々な環境要因のために、複数の画像からボールに該当する領域の明るさの分布がイメージごとに異なることがある。例えば、ボールに該当する領域の明るさが全体的に暗いことがあり、(図4の(a)参照)、ボールに該当する領域のうちの中央部の明るさが他の部分に比べて過度に明るいことがある(図4の(b)を参照)。
まず、本発明の一実施例によると、画像処理部(210)(具体的には、画像補正部)は、物理量の測定の対象となるボールを撮影した複数の画像それぞれからボールに該当する領域の撮影された明るさ分布を算出する機能を実行することができる。
具体的には、本発明の一実施形態に係る画像補正部は、複数の画像それぞれからボールに該当する領域の中心点、最大の明るさ地点、半径などを算出することにより、各画像内のボールに該当する領域を特定することができる。また、本発明の一実施形態に係る画像補正部は、複数の画像それぞれからボールに該当する領域内の所定の地点(例えば、中心点、最大の明るさ地点など)を基準にして、ボールに該当する領域の明るさの分布を算出することができる。
より具体的には、本発明の一実施形態に係る画像補正部は、線形回帰モデル(Linear Riguresshon Model)、ノンパラメトリックモデル(Non−Parametric Model)などの推定モデルまたは統計学的モデルを利用して、複数の画像それぞれからボールに該当する領域の明るさの分布を算出することができる。
例えば、線形回帰モデルに基づいて、複数の画像それぞれからボールに該当する領域内で最大の明るさ地点と任意の点の間の距離とその任意の点の明るさとの間の関係が導出されることができる。別の例として、ブラーフィルタ(Blurring Filter)、ローパスフィルタ(Low Pass Filter)、ガウシアンフィルタ(Gaussian Filter)などのノンパラメトリックモデルに基づいて、複数の画像それぞれからボールに該当する領域内の任意の地点の明るさが算出されることができる。
また、本発明の一実施例によると、画像処理部(210)(具体的には、画像補正部)は、基準の明るさ分布を参照して、複数の画像のうち少なくとも一つの画像のボールに該当する領域の撮影された明るさの分布を補正する機能を実行することができる。ここで、本発明の一実施例によると、基準の明るさの分布は、ボールの表面上に表示されているマークを検出して認識することに適切なものに既に設定されてある明るさの分布としては、データベース(240)内に格納されていることがある。
具体的には、本発明の一実施形態に係る画像補正部は、補正の対象となる画像のボールに該当する領域の撮影された明るさの分布の均一性が既に設定されてあるレベル以上になるよう、その画像のボールに該当する領域の撮影された明るさの分布を補正することができる。
より具体的には、本発明の一実施形態に係る画像補正部は、第1画像のボールに該当する領域の第1に撮影された明るさの分布と基準の明るさの分布を比較すると、第1に撮影された明るさの分布を補正するための補正モデルを算出し、前記の算出された補正モデルを参照して、第1に撮影された明るさの分布を補正することができる。
例えば、本発明の一実施形態に係る補正モデルは、下の数式1と数式2のように表すことができる。
<数式 1>
E(P) = c * b(P) + d
<数式 2>
F(P) = b(P) + E(P) 又は F(P) = b(P) * E(P)
前記の数式1及び数式2で、b(P)は、任意の地点である点Pの明るさを示し、E(P)は、点Pの明るさに対する補正モデルを示し、c及びdは補正モデルE(P)を特定する補正係数を示し、F(P)は、補正モデルE(P)によって補正された(つまり、均一化された)点Pの明るさを示す。
図5は、本発明の一実施例に基づいてゴルフボールの画像に適用することができる補正モデルを視覚的に示す図である。図5の(a)と(b)は、それぞれ図4の(a)と(b)の画像に適用することができる補正モデルを視覚化したものに相当する。
図6は、本発明の一実施例に基づいて明るさが補正されたゴルフボールの画像を例示的に示す図である。
図6を参照すると、図4の(a)と(b)それぞれ示されているゴルフボールの画像のボールに該当する領域の明るさの分布が均一化されたことを確認することができる。
以上で説明したように、本発明の一実施例によると、それぞれのゴルフボールの画像内だけでなく、複数のゴルフボールの画像にわたってボールに該当する領域の明るさの分布を補正(つまり、均一化)することにより、複数の画像にわたって共通して表示されるマークを検出及び認識するにあたり、明るさの差に起因するエラーが発生する可能性を低減、その検出と認識の精度を向上させることができるようになる。
ただし、本発明に基づいてゴルフボールの画像の明るさの分布を補正する方法が必ず前記列挙されたアルゴリズムに限定されるものではなく、本発明の目的を達成できる範囲内でいくらでも変更されることがあることを明らかにしておく。
一方、本発明の一実施形態に係る物理量測定部(220)は、前記のように補正された(つまり、明るさの分布が均一化された)複数のゴルフボールの画像(より具体的には、時間的に隣接する複数のゴルフボールの画像)に表示されるマークシーケンスを分析することにより、ゴルフボールの回転速度と回転方向を測定する機能を実行することができる。具体的には、本発明の一実施形態に係る物理量測定部(220)は、上のマークシーケンスから観察されるマークのゴルフボールの表面上での移動速度と移動方向を参照にしてゴルフボールの回転速度と回転方向を推定することができる。また、本発明の一実施形態に係る物理量測定部(220)は、ゴルフボールの運動軌跡を演算、ゴルフボールの運動速度を演算したり、ゴルフボールの高さを演算する機能とをさらに実行することができる。
次に、本発明の一実施形態に係るシミュレーション部(230)は、前記のように測定されるゴルフボールの物理量に関する様々な情報に基づいて、仮想現実でゴルフボールの運動(例えば、回転速度、回転方向、移動速度、移動方向、発射角度など)を実装することができる。また、本発明の一実施形態に係るシミュレーション部(230)は、ゴルフボールの運動をグラフィックオブジェクトに反映したり、映像信号を含む制御信号を表示装置(300)に送信してゴルフボールの運動が表示装置(300)でリアルに表現されるようにすることができる。
次に、本発明の一実施形態に係るデータベース(240)には、ゴルフボールの撮影された画像は、マークシーケンス、演算された物理量等に関する情報やシミュレーションに必要な情報(例えば、仮想現実の実装に必要なデータなど)が保存されることがある。たとえ図3で、データベース(240)がシミュレータ(200)に含まれて構成されているものと示されているが、本発明を実施する当業者の必要性に応じて、データベース(240)はシミュレータ(200)とは別に構成することもできる。一方、本発明でのデータベース(240)は、コンピュータ読み取り可能な記録媒体を含む概念であり、協議のデータベースだけでなく、ファイルシステムに基づいたデータ記録などを含む広義のデータベースであることもあり、単純なログの集まりでも、これを検索してデータを抽出することができる場合、本発明でのデータベース(240)になることがある。
次に、本発明の一実施形態に係る通信部(250)は、シミュレータ(200)からの/へのデータ送受信を可能にする機能を実行することができる。本発明の一実施例によると、通信部(250)が取ることができる通信方式に特別な制限はないが、有線LAN通信、ケーブル通信などの有線通信方式や無線LAN通信、赤外線通信、RF通信、ブルートゥース通信などのような無線通信方式が好ましいことがある。
最後に、本発明の一実施形態に係る制御部(260)は、画像処理部(210)、物理量測定部(220)、シミュレーション部(230)、データベース(240)、通信部(250)との間のデータの流れを制御する機能を実行することができる。すなわち、本発明に係る制御部(260)は、シミュレータ(200)の外部からの/へのデータフローまたはシミュレータ(200)の各構成要素間のデータフローを制御することにより、画像処理部(210)、物理量測定部(220 )、シミュレーション部(230)、データベース(240)、通信部(250)から、それぞれ固有の機能を実行するように制御することができる。
上では、本発明の仮想スポーツシステムがシミュレーションゴルフシステムである場合を主に想定して説明したが、球の運動に関するシミュレーションが必要とされるすべての種類の仮想スポーツシステム(例えば、仮想野球システムや仮想サッカーシステム)に本発明の技術的原理と構成が適用されることがあることは当業者に自明である。
以上説明した本発明に係る実施例は、様々なコンピュータの構成要素を介して実行されることができるプログラム命令の形で実装され、コンピュータ読み取り可能な記録媒体に記録されることができる。前記コンピュータ読み取り可能な記録媒体は、プログラム命令、データファイル、データ構造などを単独または組み合わせて含むことができる。前記コンピュータ読み取り可能な記録媒体に記録されるプログラム命令は、本発明のために特別に設計されて構成されたものか、またはコンピュータソフトウェア分野の当業者に公知されて使用可能なものであることがある。コンピュータ読み取り可能な記録媒体の例には、ハードディスク、フロッピーディスク(登録商標)、及び磁気テープのような磁気媒体、CD−ROMやDVDなどの光記録媒体、プティカルディスク(Floptical Disk)のような磁気 - 光媒体(Magneto−optical Medium)、及びROM、RAM、フラッシュメモリなどのような、プログラム命令を保存して実行するように特別に構成されたハードウェアデバイスが含まれる。プログラムコマンドの例には、コンパイラによって作られるような機械語コードだけでなく、インタプリタなどを使用してコンピュータによって実行されることができる高級言語コードも含まれる。ハードウェアデバイスは、本発明に係る処理を実行するために複数のソフトウェアモジュールに変更することができ、その逆も同様である。
以上で、本発明が具体的な構成要素などの特定の事項、限定された実施例と図面によって説明されたが、これは本発明のより全般的な理解を助けるために提供されたものであり、本発明は前記実施例に限定されるものではなく、本発明の属する技術分野で通常の知識を有する者であれば、このような記載から多様な修正と変更を図ることができる。
したがって、本発明の思想は、前記説明した実施例に限定されて決まってはならず、後述する特許請求の範囲だけでなく、この特許請求の範囲と均等な、またはこれから等価的に変更されたすべての範囲は、本発明の思想の範疇に属するとする。
100:撮影装置
110:カメラ部
120:通信部
130:制御部
200:シミュレータ
210:画像処理部
220:物理量測定部
230:シミュレーション部
240:データベース
250:通信部
260:制御部

Claims (13)

  1. ボールの画像の明るさを補正するための方法であって、
    物理量測定の対象となるボールを撮影した複数の画像それぞれにおいて、前記ボールに該当する領域の撮影された明るさの分布を算出するステップと、
    及び基準の明るさの分布を参照にして、前記複数の画像のうち少なくとも一つの画像の前記ボールに該当する領域の撮影された明るさの分布を補正するステップとを含むボールの画像の明るさを補正するための方法。
  2. 前記算出ステップにおいて、
    線形回帰モデル(Linear Riguresshon Model)とノンパラメトリックモデル(Non−Parametric Model)のうちの少なくとも一つを用いて、前記撮影された明るさの分布を算出する請求項1に記載のボールの画像の明るさを補正するための方法。
  3. 前記算出ステップにおいて、
    前記複数の画像それぞれにおいて、前記ボールに該当する領域の中心座標及び最大の明るさの座標のうちの少なくとも一つを基準として、前記撮影された明るさの分布を算出する請求項1に記載のボールの画像の明るさを補正するための方法。
  4. 前記補正ステップにおいて、
    前記少なくとも一つの画像の前記ボールに該当する領域の撮影された明るさの分布の均一性が既に設定されてあるレベル以上になるように前記補正を実行する請求項1に記載のボールの画像の明るさを補正するための方法。
  5. 前記補正ステップにおいて、
    第1画像の前記ボールに該当する領域の第1に撮影された明るさの分布と前記基準の明るさの分布を比較することにより、前記第1に撮影された明るさの分布を補正するための補正モデルを算出するステップ、
    及び前記算出された補正モデルを参照にして、前記第1に撮影された明るさの分布を補正するステップとを含む請求項1に記載のボールの画像の明るさを補正するための方法。
  6. 前記補正モデルは、少なくとも一つの補正係数に基づいて特定される請求項5に記載のボールの画像の明るさを補正するための方法。
  7. 第1項による方法を実行するためのコンピュータプログラムを記録するコンピュータ読み取り可能な記録媒体。
  8. ボールの画像の明るさを補正するためのシステムであって、
    物理量測定の対象となるボールを撮影した複数の画像を取得する画像取得部、及び
    前記複数の画像それぞれにおいて、前記ボールに該当する領域の撮影された明るさの分布を算出し、基準の明るさの分布を参照にして、前記複数の画像のうち少なくとも一つの画像の前記ボールに該当する領域の撮影された明るさの分布を補正する画像補正部とを含むボールの画像の明るさを補正するためのシステム。
  9. 前記画像補正部は、線形回帰モデル(Linear Riguresshon Model)とノンパラメトリックモデル(Non−Parametric Model)のうちの少なくとも一つを用いて、前記撮影された明るさの分布を算出する請求項8に記載のボールの画像の明るさを補正するためのシステム。
  10. 前記画像補正部は、前記複数の画像それぞれにおいて、前記ボールに該当する領域の中心座標及び最大の明るさの座標のうちの少なくとも一つに基づいて、前記撮影された明るさの分布を算出する請求項8に記載のボールの画像の明るさを補正するためのシステム。
  11. 前記画像補正部は、前記少なくとも一つの画像の前記ボールに該当する領域の撮影された明るさの分布の均一性が既に設定されてあるレベル以上になるように前記補正を実行する請求項8に記載のボールの画像の明るさを補正するためのシステム。
  12. 前記画像補正部は、第1画像の前記ボールに該当する領域の第1に撮影された明るさの分布と前記基準の明るさの分布を比較することにより、前記第1に撮影された明るさの分布を補正するための補正モデルを算出し、前記算出されている補正モデルを参照にして、前記第1に撮影された明るさの分布を補正する請求項8に記載のボールの画像の明るさを補正するためのシステム。
  13. 前記補正モデルは、少なくとも一つの補正係数に基づいて特定される請求項12に記載のボールの画像の明るさを補正するためのシステム。
JP2017126195A 2016-06-29 2017-06-28 ボールの画像の明るさを補正するための方法、システム、及び非一時的なコンピュータ読み取り可能な記録媒体 Active JP7076955B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2016-0081874 2016-06-29
KR1020160081874A KR101850139B1 (ko) 2016-06-29 2016-06-29 공 이미지의 밝기를 보정하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체

Publications (2)

Publication Number Publication Date
JP2018005913A true JP2018005913A (ja) 2018-01-11
JP7076955B2 JP7076955B2 (ja) 2022-05-30

Family

ID=60807072

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017126195A Active JP7076955B2 (ja) 2016-06-29 2017-06-28 ボールの画像の明るさを補正するための方法、システム、及び非一時的なコンピュータ読み取り可能な記録媒体

Country Status (4)

Country Link
US (1) US10587797B2 (ja)
JP (1) JP7076955B2 (ja)
KR (1) KR101850139B1 (ja)
CN (2) CN107545562B (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109001484B (zh) * 2018-04-18 2021-04-02 广州视源电子科技股份有限公司 旋转速度的检测方法和装置
KR102109971B1 (ko) * 2018-10-29 2020-05-12 주식회사 크리에이츠 골프 스윙의 촬영을 지원하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체
KR102024831B1 (ko) * 2018-10-29 2019-09-25 주식회사 크리에이츠 공의 회전을 측정하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
CN112580583B (zh) * 2020-12-28 2024-03-15 深圳市普汇智联科技有限公司 一种台球花色识别参数自动校准方法及系统
US11956537B2 (en) * 2021-03-19 2024-04-09 Casio Computer Co., Ltd. Location positioning device for moving body and location positioning method for moving body

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005129017A (ja) * 2003-09-30 2005-05-19 Fuji Photo Film Co Ltd 画像処理装置、画像処理方法、及びプログラム
JP2006505292A (ja) * 2002-02-07 2006-02-16 エイシーシーユー‐スポート・インターナショナル,インコーポレイテッド ゴルフボールの画像を処理するための方法、装置、およびコンピュータプログラム製品
JP2013535715A (ja) * 2010-06-29 2013-09-12 ゴルフゾン カンパニー リミテッド 運動するボールに対するセンシング処理装置、センシング処理方法及びそれを用いた仮想ゴルフシミュレーション装置
JP2014199584A (ja) * 2013-03-29 2014-10-23 キヤノン株式会社 画像処理装置および画像処理方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001273500A (ja) * 2000-03-23 2001-10-05 Hitachi Ltd 運動物体計測装置および球技分析システムおよびデータサービスシステム
KR20090112538A (ko) 2008-04-23 2009-10-28 김성규 조명 제어를 이용한 골프 영상 획득 장치, 및 그를 이용한 영상처리 기반의 골프 연습 시스템
JP2009300871A (ja) * 2008-06-16 2009-12-24 Edm Kk 画像処理装置用照明装置及び方法
JP5234150B2 (ja) * 2011-08-26 2013-07-10 カシオ計算機株式会社 画像処理装置、画像処理方法及びプログラム
KR101472275B1 (ko) * 2013-01-08 2014-12-12 (주) 골프존 운동하는 볼에 대한 센싱장치 및 센싱방법과, 운동하는 볼의 스핀 산출을 위한 볼 이미지의 이미지 처리방법
JP2015204576A (ja) 2014-04-16 2015-11-16 キヤノン株式会社 複数枚画像に対する画像処理装置および方法
US10593048B2 (en) * 2016-01-07 2020-03-17 Rapsodo Pte. Ltd. Object surface matching with a template for flight parameter measurement
KR101711642B1 (ko) * 2016-06-15 2017-03-22 (주)클라우드게이트 야구 게임 시스템

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006505292A (ja) * 2002-02-07 2006-02-16 エイシーシーユー‐スポート・インターナショナル,インコーポレイテッド ゴルフボールの画像を処理するための方法、装置、およびコンピュータプログラム製品
JP2005129017A (ja) * 2003-09-30 2005-05-19 Fuji Photo Film Co Ltd 画像処理装置、画像処理方法、及びプログラム
JP2013535715A (ja) * 2010-06-29 2013-09-12 ゴルフゾン カンパニー リミテッド 運動するボールに対するセンシング処理装置、センシング処理方法及びそれを用いた仮想ゴルフシミュレーション装置
JP2014199584A (ja) * 2013-03-29 2014-10-23 キヤノン株式会社 画像処理装置および画像処理方法

Also Published As

Publication number Publication date
KR20180002405A (ko) 2018-01-08
US10587797B2 (en) 2020-03-10
US20180005396A1 (en) 2018-01-04
CN107545562B (zh) 2023-06-20
KR101850139B1 (ko) 2018-04-19
JP7076955B2 (ja) 2022-05-30
CN116721031A (zh) 2023-09-08
CN107545562A (zh) 2018-01-05

Similar Documents

Publication Publication Date Title
JP7051315B2 (ja) ボールの回転を測定するための方法、システム、及び非一時的なコンピュータ読み取り可能な記録媒体
KR101385326B1 (ko) 카메라로 운동하는 피사체를 촬영하고 그 촬영 이미지에 기초하여 피사체의 실제의 운동 궤적을 획득하기 위한 방법 및 시스템
JP7076955B2 (ja) ボールの画像の明るさを補正するための方法、システム、及び非一時的なコンピュータ読み取り可能な記録媒体
US11850498B2 (en) Kinematic analysis of user form
US11191998B2 (en) Method, system and non-transitory computer-readable recording medium for measuring ball spin
KR102129129B1 (ko) 공의 회전을 측정하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
JP6869826B2 (ja) ボールの画像撮影のために関心領域を決定するための方法、システム、及び非一時的なコンピュータ読み取り可能な記録媒体
KR102541061B1 (ko) 공 이미지의 밝기를 보정하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
KR102443281B1 (ko) 공 이미지의 밝기를 보정하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
KR20210092659A (ko) 공의 회전을 측정하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체
JP2022520681A (ja) ボールの回転を測定するための方法、システムおよび非一過性のコンピュータ読み取り可能記録媒体
JP2023548132A (ja) 仮想ゴルフシミュレーションを支援するための方法、システムおよび非一過性のコンピュータ読み取り可能記録媒体

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200624

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210901

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211126

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220426

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220518

R150 Certificate of patent or registration of utility model

Ref document number: 7076955

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150