JP2022550739A - 手持ち式物体の投影ターゲット位置を決定するためのシステム及び方法 - Google Patents

手持ち式物体の投影ターゲット位置を決定するためのシステム及び方法 Download PDF

Info

Publication number
JP2022550739A
JP2022550739A JP2022519294A JP2022519294A JP2022550739A JP 2022550739 A JP2022550739 A JP 2022550739A JP 2022519294 A JP2022519294 A JP 2022519294A JP 2022519294 A JP2022519294 A JP 2022519294A JP 2022550739 A JP2022550739 A JP 2022550739A
Authority
JP
Japan
Prior art keywords
user
reference element
dimensional plane
determining
translation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022519294A
Other languages
English (en)
Other versions
JPWO2021061572A5 (ja
Inventor
ユ－ジェン リン
マイケル ビーバーズ
スティーブン バーケット
ジョシュア デヴィッド ダンジグ
カイル ピー ハンリー
ウンベルト カム
アンソニー メロ
Original Assignee
ユニバーサル シティ スタジオズ リミテッド ライアビリティ カンパニー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ユニバーサル シティ スタジオズ リミテッド ライアビリティ カンパニー filed Critical ユニバーサル シティ スタジオズ リミテッド ライアビリティ カンパニー
Publication of JP2022550739A publication Critical patent/JP2022550739A/ja
Publication of JPWO2021061572A5 publication Critical patent/JPWO2021061572A5/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/219—Input arrangements for video game devices characterised by their sensors, purposes or types for aiming at specific areas on the display, e.g. light-guns
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/22—Setup operations, e.g. calibration, key configuration or button assignment
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A63F13/27—Output arrangements for video game devices characterised by a large display in a public venue, e.g. in a movie theatre, stadium or game arena
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/426—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving on-screen location information, e.g. screen coordinates of an area at which the player is aiming with a light gun
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63H—TOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
    • A63H30/00—Remote-control arrangements specially adapted for toys, e.g. for toy vehicles
    • A63H30/02—Electrical arrangements
    • A63H30/04—Electrical arrangements using wireless transmission
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G06F3/0308—Detection arrangements using opto-electronic means comprising a plurality of distinctive and separately oriented light emitters or reflectors associated to the pointing device, e.g. remote cursor controller with distinct and separately oriented LEDs at the tip whose radiations are captured by a photo-detector associated to the screen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Figure 2022550739000001
手持ち式物体の投影ターゲット位置は、並進係数、スケーリング係数、及びオフセットを、２次元平面上でカメラによって検出された手持ち式物体の基準要素の位置に適用することに基づいて決定される。並進係数は、平面上の較正位置と、較正位置に対応する基準要素の初期位置との間の差に基づいて決定され、基準要素の位置を移動させて投影ターゲット位置を生成する役割を果たす。スケーリング係数は、手持ち式物体を保持するユーザの腕の推定された長さに基づいて決定され、基準要素の位置をスケール調整して投影ターゲット位置を生成する役割を果たす。オフセットは、多項式に基づいて決定され、投影ターゲット位置と較正位置との間の距離を拡大する役割を果たす。
【選択図】図１

Description

（関連出願との相互参照）
本出願は、２０１９年９月２５日出願の米国仮出願第６２／９０５，９０１号「手持ち式物体の投影ターゲット位置を決定するためのシステム及び方法（Ｓｙｓｔｅｍｓ ａｎｄ Ｍｅｔｈｏｄｓ ｆｏｒ Ｄｅｔｅｒｍｉｎｉｎｇ Ｐｒｏｊｅｃｔｅｄ Ｔａｒｇｅｔ Ｌｏｃａｔｉｏｎ ｏｆ ａ Ｈａｎｄｈｅｌｄ Ｏｂｊｅｃｔ）」の利益を主張するものであり、その開示内容全体は引用により本明細書に組み入れられる。
（技術分野）
本開示は、一般に、指し示すために用いられる手持ち式物体に関し、具体的には、手持ち式物体の投影ターゲット位置を決定することに関する。
このセクションは、読み手に、以下に記載する本開示の種々の態様に関連し得る種々の態様を紹介することを意図している。この考察は、読み手に対して本開示の種々の態様をより理解するのを容易にするための背景情報を提供するのを助けると考えられる。従って、本記載はこの観点から読まれものであり従来技術の自認ではないことを理解されたい。
手持ち式物体(handheld object)は、ターゲットを指すか又はこれを選択するために使用することができる。例えば、遊園地環境において、利用客は、手持ち式物体を用いてアトラクションのアニメの登場人物に向けることができ、これの検出に応答して、システムは、アニメの登場人物にユーザインタラクション体験（例えば、尾を振る）を出力させることができる。しかしながら、ユーザの身体に関する特定の物理的特性が、ユーザがターゲットを指している場合を正確に判定する上での困難性をもたらす場合がある。
本開示のこれら及び他の特徴、態様、及び利点は、図面を通して同様の符号が同様の要素を表す添付の図面を参照して以下の詳細な説明を読むことでよりよく理解されるであろう。
本開示の実施形態による、手持ち式物体をターゲットに向けるユーザの図である。 本開示の実施形態による、遊園地アトラクションシステムのブロック図である。 本開示の実施形態による、手持ち式物体を較正位置に向けるユーザの図である。 本開示の実施形態による、図３の手持ち式物体の基準要素の後続の検出位置に１又は２以上の並進係数を適用する例を示す図である。 本開示の実施形態による、図３の手持ち式物体の基準要素の後続の検出位置にスケーリング係数を適用する例を示す図である。 本開示の実施形態による、手持ち式物体をシステムの異なるターゲットに向けるユーザの図である。 本開示の実施形態による、異なるサイズの複数の基準要素ゾーン及び一定サイズの複数の投影ターゲットゾーンの図である。 本開示の実施形態による、一定サイズの複数の基準要素ゾーン及び異なるサイズの複数の投影ターゲットゾーンの図である。 本開示の実施形態による、図３の手持ち式物体の投影ターゲット位置を決定するプロセスのフロー図である。 本開示の実施形態による、ユーザの腕の動きの弧状性質と２次元平面との間の形状の差によって生じる歪みを補正するプロセスのフロー図である。
本開示の１又は２以上の特定の実施形態を以下で説明する。これらの実施形態の簡潔な説明を行うために、実際の実行例の全ての特徴を本明細書で説明することができるというわけではない。何らかの工業設計又は設計プロジェクトの場合と同様に、何らかの当該の実際の実行例の開発において、実行例間で変動する場合があるシステム関連及び事業関連の制約の遵守など、開発担当者らの特定の目標を達成するために数多くの実行固有の意思決定を行う必要があることを認識されたい。さらに、このような開発作業は、複雑かつ時間が掛かることがあり得るが、それでも、本開示の恩恵を有する当業者にとって設計、作製、及び製造の日常的な仕事になることを認識されたい。
本開示の様々な実施形態の要素を説明する場合に、冠詞「ａ」、「ａｎ」、及び「ｔｈｅ」は、要素の１又は２以上があることを意味することが意図されている。用語「～を備える」、「～を含む」、及び「～を有する」は、包括的であり、かつ、記載された要素以外のさらなる要素がある場合があることを意味することが意図されている。加えて、本開示の「１つの実施形態」又は「一実施形態」への言及は、記載された特徴部も組み込む追加の実施形態の存在を除外すると解釈されることが意図されていないことを理解されたい。
本開示は、一般に、指し示すために使用される手持ち式物体に関し、より具体的には、手持ち式物体の投影ターゲット位置を決定することに関する。具体的には、基準要素(reference element)は、手持ち式物体が向いている場所についての指示を提供することができる。例えば、遊園地設定において、ユーザは、手持ち式物体を用いてアトラクションのアニメの対象物（ロボット又はアニメの登場人物など）に向けることができ、基準要素の位置の検出に応答して、アニメの対象物は、ユーザインタラクション体験（例えば、尾を振る）を出力することができる。別の例として、ユーザは、ポスター上の単語に向けることができ、基準要素の位置の検出に応答して、近くのスピーカーが単語を発する音声を出力することができる。更に別の例として、ユーザは、電子ディスプレイ上の人物の画像に向けることができ、基準要素の位置の検出に応答して、画像内の人物が動くのを提示する動画を再生することができる。
ここに開示するシステム及び方法は、カメラを用いて、カメラの方向に垂直な２次元平面上の基準要素の位置を決定することを含む。カメラは、カメラによって容易に検出可能な材料（例えば、逆反射材料）で作ることができる手持ち式物体の基準要素を検出することができる。基準要素の位置を使用して、ユーザが手持ち式物体を向けていたターゲット位置を決定することができる。しかしながら、システムによっては、手持ち式物体を向けている場所についてのユーザの知覚が、カメラの視界に基づいて決定されるユーザが向けている場所の投影位置と一致しないことがある。これは、片方の目が利き目である（例えば、右目が利き目又は左目が利き目）、頭の傾き、体重移動、片側又は別の側への傾きなどを含む様々な要因に起因する場合がある。これらの要因の何らかの組み合わせにより、ユーザの手が手持ち式物体を同じ位置に向けていても、ユーザが向けている場所についてのユーザの知覚が変わることがある。カメラは、本実施形態により使用することができる様々な光検出器の一例である。従って、カメラへの言及は、本開示の実施形態によって使用され得る他の光検出器を代表する。
ここに開示するシステム及び方法は、ユーザが手持ち式物体を向けることができる較正ポイントを２次元平面上に提供することを含む。２次元平面に対する基準要素の位置を、初期位置として決定することができ、初期位置と較正ポイントとの差に基づいて、１又は２以上の並進係数(translation factors)を決定することができる。すなわち、較正ポイントは、ユーザが手持ち式物体を向けていると知覚する場所に相関することができ、一方で、基準要素の初期位置は、カメラの視点からの２次元平面上の基準要素の位置に相関することができる。この２つの間の差を用いて、カメラの視点から２次元平面上で検出された後続の基準要素の位置を、投影ターゲット位置（例えば、ユーザが向けているか又は向けようとしていると知覚する場所に対応する）に並進することができる。すなわち、１又は２以上の並進係数は、手持ち式物体を向けている場所についてのユーザの知覚と、基準要素が２次元平面上のどこに位置するかのカメラの決定（判定）との間の差を補正することができる。
更に、ユーザは、インタラクションモデルにおいて、自身の肩が球の中心のように扱われた、球又は球欠の半径として機能し得る腕を用いて、手持ち式物体を動かして向ける。ユーザが手持ち式物体を動かすか又は異なるターゲットに向けると、同じターゲットに向けられているにもかかわらず、手持ち式物体の基準要素のそれぞれの位置がユーザごとに異なる場合がある。これは、ユーザの腕の長さが異なることに起因する場合がある。
従って、ここに開示するシステム及び方法は、基準要素の初期位置に基づいて基準要素の高さ（例えば、地面から）を決定し、基準要素の高さに基づいてユーザの身長を推定する。ユーザの身長から、ユーザの腕の長さを推定することができ、これを用いて、１又は２以上のスケーリング係数(scaling factors)を決定することができる。１又は２以上のスケーリング係数は、カメラの視点から２次元平面上で検出された後続の基準要素の位置をスケール調整又は乗算して、投影ターゲット位置（例えば、ユーザが向けているか又は向けようとしていると知覚する場所に対応する）をより正確に決定することができる。このようにして、１又は２以上のスケーリング係数は、ユーザの腕の長さの差を補正することができる。
カメラにより後続の基準要素位置を検出すると、１又は２以上の並進係数及び１又は２以上のスケーリング係数を後続の基準要素位置に適用して、２次元平面に対する投影ターゲット位置を決定することができる。本実施形態は、カメラによって取り込まれて伝達されたデータを分析して、並進係数、スケーリング係数、２次元平面に対する投影ターゲット位置などの関連データを提供するよう動作するプロセッサを含むことができる。
追加的に、肩を中心として自身の腕が球又は球欠の半径として機能することで、ユーザは手持ち式物体を弧状又は円形の性質をもって動かすことができる。しかしながら、平坦な２次元平面上の手持ち式物体の基準要素の位置を決定するカメラは、空間内の手持ち式物体の弧状の動きとカメラによって検出可能な平坦な２次元平面との間の形状の差に起因して、基準要素の決定位置を歪める場合がある。
従って、ここに開示するシステム及び方法は、この歪みを補正する、投影ターゲット位置に適用するための１又は２以上のオフセットを決定することができる。１又は２以上のオフセットは、ユーザの腕の動きの弧状性質と平坦な２次元平面との間の形状の差を補正するために、投影ターゲット位置を移動させて、投影ターゲット位置と初期位置との間の距離を増大又は拡大することができる。例えば、１又は２以上のオフセットは、テストデータを１又は２以上の多項式（例えば、３次の多項式）に適合させる多項式回帰を使用して決定することができる。
いくつかの実施形態において、複数の基準要素ゾーン（例えば、基準要素がユーザの腕に基づく円弧に沿って位置する場所）は、複数の投影ターゲットゾーン（例えば、２次元平面上に投影された）に対応すると決定することができる。各投影ターゲットゾーンは、その投影ターゲットゾーンに適用される歪みを正確に補正できる多項式のそれぞれのセットに対応することができる。従って、カメラは、基準要素ゾーン内の基準要素を検出することができ、それぞれの投影ターゲットゾーンが基準要素ゾーンに対応すると決定することができ、それぞれの投影ターゲットゾーンに対応する多項式のそれぞれのセットを用いて、この歪みを補正するために基準要素の位置に適用する１又は２以上のオフセットを決定することができる。このような実施形態においては、複数の投影ターゲットゾーンが同じサイズである限り、複数の基準要素ゾーンは異なるサイズとすることができ（例えば、基準要素ゾーンが２次元平面から遠く離れているほど、基準要素ゾーンのサイズが小さくなる）、或いは複数の投影ターゲットゾーンが異なるサイズである限り、複数の基準要素ゾーンは同じサイズとすることができる（例えば、投影ターゲットゾーンが基準要素から遠く離れているほど、投影ターゲットゾーンのサイズが大きくなる）。
導入として、図１は、本開示の実施形態による、手持ち式物体１２をターゲット１４に向けるユーザ１０の図である。ターゲット１４は、物理的対象、図、写真、グラフィックなどとすることができる。場合によっては、ターゲット１４は、ディスプレイによって出力される画像とすることができる。ターゲット１４は、構造体１５上に印刷、刻み込み、書き込み、投影、貼り付け、又はそれ以外の方法で表示することができる。ユーザの知覚は、第１破線１６で示される。すなわち、ユーザ１０は、手持ち式物体１２をターゲット１４に、具体的にはターゲット位置１７に向けていると知覚する。しかしながら、片方の目が利き目である、頭の傾き、体重移動、片側又は別の側への傾きなど、特定の人間の要素に起因して、ユーザの知覚又は意図にもかかわらず、ユーザ１０は実際には、破線１９で示されるように、実際のターゲット位置１８に手持ち式物体１２を向ける。
手持ち式物体１２は、ユーザ１０がターゲット１４に向けるか又はこれを参照するために使用することができるスティック、鉛筆、銃又は武器のおもちゃ又は模型、杖などの、何らかの適切なオブジェクトを代表するか又は含むことができる。手持ち式物体１２は、ユーザ１０が指している場所を特定するのを容易にすることができる基準要素２０を含むことができる。具体的には、カメラ２２は、基準要素２０の位置を検出し、基準要素２０は、カメラ２２が基準要素２０をより容易に検出できるようにする材料又は手段から作ることができる。例えば、基準要素２０は、逆反射材料（例えば、逆反射ガラスビーズ、マイクロプリズム、或いは布又はプラスチック基板上にシールされたカプセル化レンズ)、金属テープなどから作ることができる。別の例では、基準要素２０は、カメラ２２が基準要素２０を識別できるようにする識別子（例えば、一意のグラフィカルデザイン、バーコード、クイックレスポンス（ＱＲ）コードなど）を含むことができる。図示するように、基準要素２０は、ユーザの手２８が手持ち式物体１２を保持している端部２６とは反対の手持ち式物体１２の端部２４に位置することができる。これは、ユーザが手持ち式物体１２を向けている方向を特定するのを容易にすることができるが、基準要素２０は、手持ち式物体１２の任意の部分、又はユーザ１０の任意の部分にさえ配置することができる。
カメラ２２は、２次元平面３２に対する基準要素２０の位置３０を検出することができる。位置３０は、１又は２以上の並進係数を適用することによって、ユーザ１０が向けているか又は向けようとしていると知覚するターゲット位置１７を決定するために使用することができる。図示するように、２次元平面３２は、構造体１５と同じ平面を共有できるが、一部の実施形態では、２次元平面３２及び構造体１５は同じ平面を共有しない場合がある。例えば、２次元平面３２及び構造体１５は互いに平行とすることができる。更に、カメラ２２が基準要素２０の位置３０を検出できるように、構造体１５は、半透明、透明、又は、カメラ２２が基準要素２０の位置３０を検出できるようにする何らかの他の適切な特性を含むことができる。
具体的には、１又は２以上の並進係数を基準要素２０の位置３０に適用して、手持ち式物体１２を向けている場所についてのユーザの知覚と、基準要素２０が２次元平面３２上のどこに位置するかのカメラの決定との間の差を補正することができる。１又は２以上の並進係数は、ユーザ１０が手持ち式物体１２を較正ポイントに向け、カメラ２２が２次元平面３２上の基準要素２０のこの初期位置を検出する較正プロセス中に決定することができる。１又は２以上の並進係数は、初期位置が移動されて（例えば、２次元平面３２に対して）較正ポイントになる１又は２以上の距離を表すことができる。加えて、１又は２以上の並進係数は、片方の目が利き目である（例えば、右目が利き目又は左目が利き目）、頭の傾き、体重移動、片側又は別の側への傾きなどを緩和又は補正することができる。
更に、１又は２以上のスケーリング係数を基準要素２０の位置３０に適用して、ユーザの腕の長さの差を考慮又は補正することができる。すなわち、ユーザは、肩を球の中心とする球又は球欠の半径として機能し得る腕を使って、手持ち式物体１２を動かして向ける。ユーザが異なるターゲットに手持ち式物体１２を動かすか又は向けると、同じターゲットに向けられているにもかかわらず、ユーザの腕の長さが異なるため、手持ち式物体１２の基準要素２０のそれぞれの位置がユーザ間で異なる場合がある。
従って、基準要素２０の高さは（例えば、地面からの）、基準要素２０の初期位置に基づいて決定することができ、ユーザの身長は、基準要素２０の高さに基づいて推定することができる。ユーザの身長から、ユーザの腕の長さを推定することができ、これを用いて、１又は２以上のスケーリング係数を決定することができる。１又は２以上のスケーリング係数は、２次元平面３２上でカメラ２２によって検出された基準要素２０の位置３０をスケール調整する又は拡大することができる。
追加的に、１又は２以上のオフセットを基準要素２０の位置３０に適用して、手持ち式物体１２の投影ターゲット位置を生成して、ユーザの腕の弧状又は円形の動きから生じる歪みを補正することができる。すなわち、この歪みは、弧状の動きと平坦な２次元平面３２上の基準要素２０の位置３０のカメラの検出位置との間の形状の差によって生じ得る。１又は２以上のオフセットは、ユーザの腕の動きの弧状性質と平坦な２次元平面との間の形状の差を補正するために、投影ターゲット位置を移動させて、投影ターゲット位置と初期位置との間の距離を増大又は拡大することができる。例えば、１又は２以上のオフセットは、テストデータを３次多項式などの多項式に適合させる多項式回帰を用いて決定することができる。
このようにして、手持ち式物体１２の投影ターゲット位置を生成することができ、これは、ユーザ１０が手持ち式物体１２を向けていると知覚するターゲット位置１７と厳密に一致し得る。有利には、他の特定のシステムとは異なり、較正の１つのポイントのみを用いて、並進係数、スケーリング係数、及びオフセットを決定し、手持ち式物体１２の投影ターゲット位置を正確に決定することができる。一方、他の用途（例えば、プレゼンテーションで使用されるポインティングデバイス）では、実際の実行の前（例えば、準備段階中）に較正を行うことができ、聴衆又は客に見られることはないので、較正時間の短縮はそれほど重要でない場合がある。しかしながら、本例の場合には（例えば、遊園地のアトラクションでは）、較正が行われていることをユーザ１０に隠すか又は気付かせないことで、没入型ユーザ体験をもたらすことが重要な場合がある。従って、較正プロセスを単一ポイントに限る（例えば、手持ち式物体１２を単一の較正ポイントに向ける）ことで、ユーザ体験を高めるか又は強化する役割を果たすことができる。
これを考慮して、図２は、本開示の実施形態による、遊園地アトラクションシステム(theme park attraction system)４０のブロック図である。遊園地アトラクションシステム４０により、ユーザ１０は手持ち式物体１２を様々なターゲット１４に向けることができ、ユーザ１０がターゲット１４に手持ち式物体１２を向けたという判定に基づいてユーザインタラクション体験を出力することができる。例えば、遊園地アトラクションシステム４０は、子どもに人気のキャラクターを有する環境、テレビ又は映画をテーマにした環境、射撃練習場、標的群などを含むことができる。
遊園地アトラクションシステム４０は、ユーザ１０によって保持されて操作されるような、基準要素２０を有する手持ち式物体１２を含むことができる。遊園地アトラクションシステム４０はまた、２次元平面３２上の基準要素の位置を検出するカメラ２２を含むユーザインタラクションシステム４２も含むことができる。遊園地アトラクションシステム４０は、投影位置決定システム(projected location determination system)４４を更に含むことができ、これは、手持ち式物体１２の投影ターゲット位置を決定する。具体的には、投影ターゲット位置は、ユーザ１０が向けているか又は向けようとしていると知覚する２次元平面３２上の位置を表すことができる。実際、投影ターゲット位置がターゲット位置１７に近いほど、投影ターゲット位置は正確になる。
投影位置決定システム４４は、１又は２以上のプロセッサ（単一プロセッサ４８として図示される）及び１又は２以上のメモリ又は記憶デバイス（単一メモリデバイス５０として図示）を有する制御装置４６を含むことができる。プロセッサ４８は、手持ち式物体１２の投影ターゲット位置の決定を容易にする、メモリデバイス５０内に記憶されたソフトウェアプログラム及び／又は命令を実行することができる。更に、プロセッサ４８は、複数のマイクロプロセッサ、１又は２以上の「汎用」マイクロプロセッサ、１又は２以上の特定用途向けマイクロプロセッサ、及び／又は１又は２以上の特定用途向け集積回路（ＡＳＩＣＳ）を含むことができる。例えば、プロセッサ４８は、１又は２以上の縮小命令セット（ＲＩＳＣ）プロセッサを含むことができる。メモリデバイス５０は、制御ソフトウェア、検索テーブル、構成データなどの情報を記憶することができる。メモリデバイス５０は、揮発性メモリ（例えば、ランダムアクセスメモリ（ＲＡＭ））、不揮発性メモリ（例えば、読み出し専用メモリ（ＲＯＭ））、フラッシュメモリ、１又は２以上のハードドライブ、及び／又は何らかの他の適切な光学、磁気、又は固体記憶媒体などの有形の非一時的機械可読媒体を含むことができる。メモリデバイス５０は、種々の情報を記憶することができ、手持ち式物体１２の投影ターゲット位置を容易にする命令など、様々な目的に使用することができる。
投影位置決定システム４４はまた、２次元平面３２上の基準要素２０の位置を決定する基準要素位置検出ロジック５２を含むこともできる。具体的には、投影位置決定システム４４は、有線通信を介する、或いは無線通信プロトコル又は技術（例えば、無線、Ｂｌｕｅｔｏｏｔｈ、ＷｉＦｉ、赤外線、イーサネット、スレッド、ＺｉｇＢｅｅ、Ｚ－Ｗａｖｅ、ＫＮＸ、モバイル、及び／又はマイクロ波）を用いた通信ネットワーク上などの何らかの適切な手段によって、ユーザインタラクションシステム４２に通信可能に結合することができる。従って、基準要素位置検出ロジック５２は、２次元平面３２上の基準要素２０を示す取り込み画像(captured images)（例えば、映像(imagery)）をカメラ２２から受け取ることができる。基準要素位置検出ロジック５２は、例えば２次元座標系（例えば、ｘ及びｙ）によって表される２次元平面３２上の基準要素２０の位置を決定することができる。
投影位置決定システム４４は、基準要素位置検出ロジック５２によって決定された基準要素２０の位置を、２次元平面３２に対する投影ターゲット位置に変換する変換ロジック５４を更に含むことができる。変換ロジック５４は、手持ち式物体１２を向けている場所についてのユーザの知覚と、基準要素２０が２次元平面３２上のどこに位置するかのカメラの決定との間の差を補正する１又は２以上の並進係数を決定する並進ロジック(translation logic)５６を含む。
具体的には、並進ロジック５６は、単一ポイント較正プロセスを行うことにより１又は２以上の並進係数を決定することができる。このプロセスは、２次元平面３２上の較正位置を受け取ることと、２次元平面３２上の基準要素２０の位置を受け取ることと（例えば、ユーザ１０が手持ち式物体１２を較正位置に向けるときに対応して）、較正位置と基準要素２０の位置との間の位置の差に基づいて１又は２以上の並進係数を決定することとを含む。
図３は、本開示の実施形態による、手持ち式物体１２を較正位置８０に向けるユーザ１０の図である。較正位置８０は、物理的物体、図、写真、グラフィックなどに対応することができる。場合によっては、較正位置８０は、ディスプレイによって出力される画像に対応することができる。ユーザ１０は、何らかの適切な形式で提供される命令によって促される場合がある（例えば、構造体１５上に書き込み、刻み込み、印刷、貼り付け、又は表示される)。較正位置８０は、ユーザが同じように腕を位置付けて制御された方法でユーザの身長を検出できるように設けることができ、その一方で、図２の投影位置決定システム４４が、手持ち式物体１２を向けている場所についてのユーザの知覚とユーザ１０が実際に手持ち式物体１２を向けている場所との間の差を決定できるようにもする。例えば、較正位置８０は、ユーザ１０が、例えば、地面８４に対してできるだけ平行に、地面に平行な平面に対して一定の角度で、腕８２を伸ばせるように位置することができる。いくつかの実施形態では、較正位置８０は、ユーザの身長に関してカスタマイズすることができる。すなわち、いくつかの実施形態では、較正位置８０は、車いす、個人向け電気自動車、ベビーカーなどの車両に座っているユーザに関しては、構造体１５上でより下方に位置することができる。別の例として、較正位置８０は構造体１５上で、大人の場合は子どもよりも高いところに位置することができ、較正位置８０は構造体１５上で、男性ユーザの場合は女性ユーザよりも高いところに位置することができる。
従って、較正位置８０は、投影位置決定システム４４によって予め定められて既知とすることができる。促されると、ユーザ１０は腕８２を伸ばして、手持ち式物体１２を較正位置８０に向けることができる。しかしながら、片方の目が利き目である、頭の傾き、体重移動、片側又は別の側への傾き、ユーザの手持ち式物体１２を持つ手の選択（例えば、右手対左手）、物理的制約（例えば、動きの範囲に影響を与える）、ユーザの動きがじゃま者（バックパックや子どもを抱いているなど）によって変化する可能性があるか否かなどの、人体によって生じる歪み効果に起因して、破線８５で示すような手持ち式物体１２を較正位置８０に向けているというユーザの知覚又は向けようとする意図にもかかわらず、ユーザ１０が実際には手持ち式物体１２を破線８８で示された実際の較正位置８６などの別の場所に向ける場合がある。
カメラ２２は、２次元平面３２上の基準要素２０の位置９０を検出して、位置９０の表示値を投影位置決定システム４４に送る。次に、人のインタラクションモデルの一部とすることができる並進ロジック５６は、基準要素２０の位置９０と所定の較正位置８０との間の位置の差を決定することができ、これを２次元（例えば、ｘ及びｙ）座標で表現することができる。並進ロジック５６は、この差を用いて、基準要素２０の後続の検出位置に適用可能な１又は２以上の並進係数を生成して、基準要素２０の後続の検出位置を移動させ、ユーザ１０が手持ち式物体１２を向けようとしていた場所に対応する、手持ち式物体１２の後続の投影ターゲット位置を決定する。並進係数は、変換行列の形式で提供することができ、基準要素２０の後続の検出位置に適用されて、以下に示すように基準要素２０の投影ターゲット位置を生成することができる。
Figure 2022550739000002
 ここで、
ｘ＝２次元平面３２上の基準要素２０の位置９０の水平成分
ｙ＝２次元平面３２上の基準要素２０の位置９０の垂直成分
Ｘ＝２次元平面３２上の基準要素２０と較正位置８０との間の水平方向の差
Ｙ＝２次元平面３２上の基準要素２０と較正位置８０との間の垂直方向の差
ｘ’＝２次元平面３２上の手持ち式物体１２の投影ターゲット位置の水平成分
ｙ’＝２次元平面３２上の手持ち式物体１２の投影ターゲット位置の垂直成分
である。
例えば、図４は、本開示の実施形態による、基準要素２０の後続の検出位置１２０に１又は２以上の並進係数を適用する例の図である。図示したように、較正中、基準要素２０の位置９０は、較正位置８０の右に２単位（例えば、センチメートル）、較正位置８０から上に１単位（例えばセンチメートル）である。従って、並進係数は、水平方向に＋２及び垂直方向に＋１を含むことができる。従って、変換行列においてＸは＋２に設定し、Ｙは＋１に設定することができる。並進ロジック５６は、基準要素２０の後続の検出位置１２０（例えば［４、２］）に変換行列を適用して、後続の検出位置１２０を右に２単位及び上に１単位移動させて、較正位置８０の右に６単位及び上に３単位のところに投影ターゲット位置１２２を生成することができる（例えば、［６、３］)。従って、並進ロジック５６は、手持ち式物体１２を向けている場所についてのユーザの知覚と、基準要素２０が２次元平面３２上のどこに位置しているかのカメラの決定との間の差を補正することができる。
図２に戻ると、変換ロジック５４は、ユーザの腕の長さの差を補正する１又は２以上のスケーリング係数を決定するスケーリングロジック(scaling logic)５８も含むことができる。すなわち、図３に示すように、ユーザ１０は、肩を球の中心９４とした球又は球欠９２の半径として機能し得る腕８２を用いて、手持ち式物体１２を動かして向ける。ユーザ１０が異なるターゲットに向くように手持ち式物体１２を動かすと、手持ち式物体１２の基準要素２０のそれぞれの位置は、ユーザ１０の腕の長さが異なることに起因して、同じターゲットに向けているにもかかわらず、ユーザ１０ごとに異なる場合がある。
具体的には、スケーリングロジック５８は、較正プロセス中にカメラ２２によって検出された基準要素２０の位置９０に基づいて、１又は２以上のスケーリング係数を決定することができる。地面８４からのカメラ２２の高さ９６は、スケーリングロジック５８によって予め定められて既知とすることができる。従って、スケーリングロジック５８は、基準要素２０の位置９０及び所定の高さ９６に基づいて、地面８４からの基準要素２０の高さ９８を決定することができる。基準要素２０の高さ９８に基づいて、スケーリングロジック５８のユーザ身長推定ロジック６０は、ユーザの身長１００を決定することができる。具体的には、ユーザ１０が手持ち式物体１２を較正位置８０に向けたときの基準要素２０の位置９０及びそれらのユーザ１０の身長のテスト又はサンプルデータを収集することができる。基準要素２０の位置９０の高さ１０２は、ユーザ１０の身長に相関し、スケーリングロジック５８は、この所定の相関及び基準要素２０の高さ９８に基づいてユーザの身長１００を推定することができる。相関を識別するためのモデルは、身長と手が届く範囲との間の標準相関のテーブル（例えば、個体群の様々な体型に関する身長と腕の長さとの間の比率）を実装することができる。
次に、スケーリングロジック５８のユーザの腕の長さ推定ロジック６２は、ユーザの身長１００に基づいてユーザの腕の長さ１０４を推定することができる。推定は、腕の長さ１０４とユーザの身長１００との間の所定の相関（例えば、経験データに基づくアルゴリズム又はテーブル）に基づいて行うことができる。この所定の相関は、テスト又はサンプルデータ、人体の比率に関連する科学的データ、及び／又は何らかの他の適切なソースに基づいて決定することができる。
スケーリングロジック５８は、ユーザの腕の長さ１０４に基づいて１又は２以上のスケーリング係数を決定することができる。例えば、初期位置（例えば、較正位置８０）から離れたところに向いている場合、カメラ２２は、腕の長さが長いユーザ１０と比較して腕の長さ１０４が短いユーザのほうが、基準要素２０の位置が初期位置により近いことを検出することができる。従って、スケーリングロジック５８は、腕の長さ１０４が短いユーザ１０に比べて、腕の長さ１０４が長いユーザ１０に関しては、より大きいスケーリング係数を決定することができる。スケーリングロジック５８は、基準要素２０の後続の検出位置に１又は２以上のスケーリング係数を適用して、位置をスケール調整（例えば、縮小又は拡大）して、基準要素２０の投影ターゲット位置を生成することができる。スケーリング係数は、水平及び垂直成分を含み、変換行列の形式で提供することができ、以下に示すように上記の式１からの並進係数を含む変換行列内に挿入することができる。
Figure 2022550739000003
 ここで、
ｋ１＝ユーザの腕の長さ１０４に基づいて生成される水平スケーリング係数
ｋ２＝ユーザの腕の長さ１０４に基づいて生成される垂直スケーリング係数
である。
スケーリング係数ｋ１及びｋ２の値は、手持ち式物体１２を様々なターゲットに向けているユーザ１０から収集した相関テスト又はサンプルデータ、及びそれらのユーザ１０の腕の長さ１０４に基づいて決定することができる。例えば、スケーリングロジック５８は、カメラ２２から受け取った画像データ（例えば、映像の第１又は較正画像）に基づいて、地面８４からの基準要素２０の高さ９８が１．２５メートルであると決定することができる。ユーザ身長推定ロジック６０は、基準要素２０の高さ９８に基づいて、ユーザの身長１００が約１．８メートルであると決定することができる。ユーザの腕の長さ推定ロジック６２は、ユーザの身長１００に基づいて、ユーザの腕の長さ１０４が０．６メートルであると決定することができる。次にスケーリングロジック５８は、ユーザの腕の長さ１０４に基づいて、水平スケーリング係数ｋ1が１．５であり、垂直スケーリング係数ｋ2が１．７５であると決定することができる。従って、スケーリングロジック５８は、ｋ1＝１．５及びｋ2＝１．７５での式２の変換行列を生成し、投影位置決定システム４４は、基準要素２０の後続の検出位置に変換行列を適用して、ユーザ１０が手持ち式物体１２を向けようとしていた場所の投影ターゲット位置を生成することができ、これが、ユーザの腕の長さ１０４の差を補正する。
例えば、図５は、本開示の実施形態による、基準要素２０の後続の検出位置１２０にスケーリング係数を適用する例の図である。図示するように、基準要素２０の後続の検出位置１２０は、較正位置８０の右に４単位（例えば、センチメートル)、較正位置８０から上に４単位（例えば、センチメートル）である（例えば、［４，４］）。水平スケーリング係数ｋ1＝１．５及び垂直スケーリング係数ｋ2＝１．７５を有する式２の変換行列を後続の検出位置１２０に適用すると、後続の検出位置１２０が水平方向に１．５だけスケール調整することで、較正位置８０の右に６単位のところに投影ターゲット位置１３０が生成され、垂直方向に１．７５だけスケール調整されることで、上に７単位（例えば、センチメートル）のところに投影ターゲット位置１３０が生成される（例えば、［６、７］）。従って、スケーリングロジック５８は、ユーザの腕の長さ１０４の差を補正することができる。
図２に戻ると、投影位置決定システム４４は、ユーザの腕の動きの弧状性質９２と平坦な２次元平面３２との間の形状の差を補正する円弧歪み補正ロジック(arc distortion compensation logic)６４を含むことができる。例えば、図６は、手持ち式物体１２を異なるターゲットに向けるユーザ１０の図である。図示するように、ユーザの腕８２の第１位置１４０とユーザの腕８２の第２位置１４２との間に形成される角度θは、ユーザの腕８２の第３位置１４４とユーザの腕８２の第４位置１４６との間と同じである。しかしながら、カメラ２２が２次元平面３２上で観察して取り込む場合、ユーザの腕８２の第１位置１４０に対応する第１基準要素位置１４８と、ユーザの腕８２の第２位置１４２に対応する第２基準要素位置１５０との間の距離ｈ0は、ユーザの腕８２の第３位置１４４に対応する第３基準要素位置１５２と、ユーザの腕８２の第４位置１４６に対応する第４基準要素位置１５４との間の距離ｈ1とは異なる（例えば、より大きい）。
このように、円弧歪み補正ロジック６４は、投影ターゲット位置に適用する１又は２以上のオフセットを決定することができ、これはこの歪みを補正する。１又は２以上のオフセットは、投影ターゲット位置と初期位置（例えば、較正位置８０）との間の距離を増大又は拡大するために、投影ターゲット位置を移動させて、ユーザの腕の動きの弧状性質９２と平坦な２次元平面３２との間の形状の差を補正することができる。例えば、１又は２以上のオフセットは、手持ち式物体１２を様々なターゲットに向ける（例えば、基準要素２０で円弧９２に沿って）ユーザ１０からのテスト又はサンプルデータを式に適合させる回帰分析を用いて決定することができる。いくつかの実施形態では、円弧歪み補正ロジック６４は、テストデータを多項式（例えば、第３次の多項式）に適合させることができるが、何らかの適切な次数又はタイプの式を使用することができる。例えば、３次の第１多項式（以下の式３及び４）を使用して、この歪みを水平方向で補正する、投影ターゲット位置に適用するための水平オフセットを決定し、３次の第２多項式（以下の式５及び６）を使用して、この歪みを垂直方向で補正する、投影ターゲット位置に適用するための垂直オフセットを決定することができる。
Figure 2022550739000004
 （これは追加的に又は代替的に以下のように表すことができる。
ｘoffset＝ａｘ3＋ｂｙ3＋ｃｘ2ｙ＋ｄｘｙ2＋ｅｘ2＋ｆｙ2＋ｇｘｙ＋ｈｘ＋ｋｙ＋ｌ） 式４
Figure 2022550739000005
 （これは追加的に又は代替的に以下のように表すことができる。
ｙoffset＝ａｙ3＋ｂｘ3＋ｃｙ2ｘ＋ｄｙｘ2＋ｅｙ＋ｆｘ2＋ｇｙｘ＋ｈｙ＋ｋｘ＋ｌ 式６
ここで、
ｘoffset＝投影ターゲット位置に適用される水平オフセット
ｙoffset＝投影ターゲット位置に適用される垂直オフセット
ｘ＝投影ターゲット位置の水平成分
ｙ＝投影ターゲット位置の垂直成分
ａi、ｂi、ｃi、ａ、ｂ、ｃ、ｄ、ｅ、ｆ、ｇ、ｈ、ｋ、及びｌ＝回帰分析を用いて決定される定数であり、各定数は式ごとに異なる場合がある（例えば、式４の定数ａは式６の定数ａと異なる場合がある)。
投影ターゲット位置の水平成分は、初期位置からの水平距離として測定することができる（例えば、較正位置８０及び／又はユーザ１０が手持ち式物体１２をカメラ２２に直接向けているときに対応する）が、投影ターゲット位置の垂直成分は、初期位置からの垂直距離として測定することができる。前述のように、多項式３から６のいずれに関しても、定数ａi、ｂi、ｃi、ａ、ｂ、ｃ、ｄ、ｅ、ｆ、ｇ、ｈ、ｋ、及び１は、多項式回帰分析を用いて多項式にテスト又はサンプルデータを適合させることによって決定することができる（式ごとに異なる場合がある)。従って、ユーザ１０が手持ち式物体１２を動かして向ける際に、各投影ターゲット位置に関して１又は２以上のオフセットを決定することができる。
しかしながら、ユーザ１０が手持ち式物体１２を動かして向ける際に、各投影ターゲット位置に関して水平オフセット及び垂直オフセットを決定するために式３から６のいずれかを適用することは、時間がかかり、過度のコンピューティング資源（例えば、処理、メモリ、ストレージ、又はネットワーク資源）を使用する場合がある。従って、いくつかの実施形態では、ユーザの腕の動きの弧状性質９２と平坦な２次元平面３２との間の形状の差をより効率的に補正するために、円弧歪み補正ロジック６４は、基準要素２０が位置し得る円弧９２を複数の基準要素ゾーンに分割することができ、その各々がそれぞれの投影ターゲットゾーン（例えば、２次元平面に投影された）に対応することができる。各投影ターゲットゾーンは、その投影ターゲットゾーンに適用できる歪みを正確に補正できる多項式のそれぞれのセットに対応することができる。従って、カメラ２２は、基準要素ゾーン内の基準要素２０を検出することができ、円弧歪み補正ロジック６４は、基準要素ゾーンに対応するそれぞれの投影ターゲットゾーンを決定することができ、円弧歪み補正ロジック６４は、それぞれの投影ターゲットゾーンに対応する多項式のそれぞれのセットを基準要素の位置に適用して、この歪みを補正するために基準要素の位置に適用される１又は２以上のオフセットを決定することができる。このような実施形態においては、複数の投影ターゲットゾーンが同じサイズである限り、複数の基準要素ゾーンは異なるサイズとすることができ（例えば、基準要素ゾーンが２次元平面３２から遠く離れているほど、基準要素ゾーンのサイズが小さくなる）、又は複数の投影ターゲットゾーンが異なるサイズである限り、複数の基準要素ゾーンは同じサイズとすることができる（例えば、投影ターゲットゾーンが基準要素２０から遠く離れているほど、投影ターゲットゾーンのサイズが大きくなる）。
図７は、本開示の実施形態による、異なるサイズの複数の基準要素ゾーン１７０及び一定サイズの複数の投影ターゲットゾーン１７２の図である。図示するように、２次元平面３２に最も近い第１基準要素ゾーン１７４は、サイズが最も大きく、２次元平面３２に次に近い第２基準要素ゾーン１７６は、次に大きいサイズ（ただし、第１基準要素ゾーン１７４よりも小さい）であり、２次元平面３２に次に近い第３基準要素ゾーン１７８は、次に大きいサイズ（ただし、第２基準要素ゾーン１７６よりも小さい）であり、２次元平面３２に次に近い第４基準要素ゾーン１８０は、次に大きいサイズ（ただし、第３基準要素ゾーン１７８よりも小さい）である。図７には４つの基準要素ゾーン１７０が示されているが、何らかの適切な数の基準要素ゾーン１７０が何らかの適切なサイズであると想定されることは理解されるべきであり、基準要素ゾーン１７０が２次元平面３２から遠く離れるほど、基準要素ゾーン１７０のサイズは縮小する。更に、各投影ターゲットゾーン１７２は、他の投影ターゲットゾーン１７２と同じサイズであり、それぞれの基準要素ゾーン１７０に対応し、基準要素２０の位置に適用することができるそれぞれのオフセット（例えば、水平及び垂直オフセット）を生成する多項式のそれぞれのセットに対応する。具体的には、それぞれの投影ターゲットゾーン１７２に対応する多項式の各セットは、式３から６のいずれかに規定されるように、定数ａi、ｂi、ｃi、ａ、ｂ、ｃ、ｄ、ｅ、ｆ、ｇ、ｈ、ｋ、及びｌについて異なる値セット有することができ（及び式ごとに異なることができる)。基準要素ゾーン１７０が２次元平面３２から遠く離れるほど、基準要素ゾーン１７０のサイズを小さくすることで、円弧歪み補正ロジック６４は、投影ターゲットゾーン１７２の同じサイズは維持しながら、ユーザの腕の動きの弧状性質９２と平坦な２次元平面３２との間の形状の差を効率的かつ資源を節約する方法で補正できる。
図８は、本開示の実施形態による、一定サイズの複数の基準要素ゾーン１９０及び異なるサイズの複数の投影ターゲットゾーン１９２の図である。図示するように、各基準要素ゾーン１９０は同じサイズである。しかしながら、基準要素２０に最も近い第１投影ターゲットゾーン１９４はサイズが最も小さく、基準要素２０に次に近い第２投影ターゲットゾーン１９６は次に小さいサイズであり（ただし、第１投影ターゲットゾーン１９４よりも大きい）、基準要素２０に次に近い第３投影ターゲットゾーン１９８は次に小さいサイズであり（ただし、第２番投影ターゲットゾーン１９６よりも大きい）、基準要素２０に次に近い第４投影ターゲットゾーン２００は、次に小さいサイズである（ただし、第３投影ターゲットゾーン１９８よりも大きい）。図８には４つの投影ターゲットゾーン１９２が示されているが、何らかの適切な数の投影ターゲットゾーン１９２が何らかの適切なサイズであると想定されることは理解されるべきであり、投影ターゲットゾーン１９２が基準要素２０から遠く離れるほど、投影ターゲットゾーン１９２のサイズは増大する。各投影ターゲットゾーン１９２は、それぞれの基準要素ゾーン１９０に対応し、基準要素２０の位置に適用することができそれぞれのオフセット（例えば、水平及び垂直オフセット）を生成する多項式のそれぞれのセットにも対応する。具体的には、それぞれの投影ターゲットゾーン１９２に対応する多項式の各セットは、式３から６のいずれかに規定されるように、定数ａi、ｂi、ｃi、ａ、ｂ、ｃ、ｄ、ｅ、ｆ、ｇ、ｈ、ｊ、ｋ、及びｌについて異なる値セットを有することができる（及び式ごとに異なることができる)。投影ターゲットゾーン１９２が基準要素２０から遠く離れるほど、投影ターゲットゾーン１９２のサイズを大きくすることで、円弧歪み補正ロジック６４は、基準要素ゾーン１９０の同じサイズは維持しながら、ユーザの腕の動きの弧状性質９２と平坦な２次元平面３２との間の形状の差を効率的かつ資源を節約する方法で補正できる。
簡潔にするために、図６～８は、ユーザの腕の動きの弧状性質９２と平坦な２次元平面３２との間の形状の差によって生じる歪みを垂直（例えばｙ）方向のみで示していることに留意されたい。しかしながら、ここに開示するシステム及び方法は、水平方向の歪みを補正するための水平オフセットを提供する式３及び４によって明らかになるような水平（例えば、ｘ）方向、及び垂直方向の歪みを補正するための垂直オフセットを提供する式５及び６によって明らかになるような垂直（例えば、ｙ）方向を含む、何らかの適切な方向の歪みを補正することを想定している。
図２に戻ると、投影位置決定システム４４により、投影ターゲット位置が、構造体１５上に印刷、刻み込み、書き込み、取り付け、又はそれ以外の方法で表示されたターゲット１４に対応すると決定された場合、ユーザインタラクションシステム４２の出力デバイス６６は、ユーザインタラクション体験を出力することができる。出力デバイス６６は、電子ディスプレイ、スピーカー、仮想現実デバイス、拡張現実デバイス、アクチュエータ、及び／又はアニメのデバイス（例えば、ロボットの登場人物）など、所望のユーザインタラクション体験を出力することができる何らかの適切なデバイスとすることができる。ターゲット１４は、出力デバイス６６の一部、これに固定される、取り付けられる、又はこれを含むことができ、或いは、ターゲット１４は、出力デバイス６６から切り離すことができる。例えば、遊園地環境では、ターゲット１４及び出力デバイス６６の両方は、アトラクションのアニメの対象物とすることができ、投影ターゲット位置がアニメの対象物に対応するという決定に応答して、アニメの対象物は、ユーザインタラクション体験（例えば、尾を振る）を出力することができる。別の例として、ターゲット１４は、ポスターに印刷された単語であり、出力デバイス６６は近くのスピーカーとすることができ、投影ターゲット位置がポスターに印刷された単語に対応するという決定に応答して、近くのスピーカーが単語を発する音声を出力することができる。更に別の例として、ターゲット１４は、電子ディスプレイ上の人物の画像で、出力デバイス６６は電子ディスプレイとすることができ、投影ターゲット位置がその人物の画像に対応するという決定に応答して、電子ディスプレイは、特徴的な行動を行う画像の人物を見せる映像を再生することができる。
このことを考慮して、図９は、本開示の実施形態による、手持ち式物体１２の投影ターゲット位置を決定するためのプロセス２１０のフロー図である。このプロセス２１０は、手持ち式物体１２の投影ターゲット位置を決定することができる何らかの適切なデバイス、例えば、制御装置４６、プロセッサ４８、基準要素位置検出ロジック５２、変換ロジック５４、並進ロジック５６、スケーリングロジック５８、ユーザ身長推定ロジック６０、及び／又はユーザの腕の長さ推定ロジック６２を含む投影位置決定システム４４の何らかの構成要素などによって実行することができる。プロセス２１０は、特定の順序のステップで用いて説明されるが、本開示では、説明されるステップは図示する順序とは異なる順序で実行でき、説明される特定のステップはスキップする又は全く実行しない場合があることが想定されることを理解されたい。いくつかの実施形態においては、プロセス２１０は、メモリデバイス５０などの有形の非一時的なコンピュータ可読媒体に記憶された命令を、プロセッサ４８などのプロセッサを使用して実行することによって実施することができる。
図示するように、プロセスブロック２１２において、プロセッサ４８は、手持ち式物体１２を較正するための指示（indication）を受け取る。この指示は、手持ち式物体１２の基準要素２０の存在を含む、カメラ２２によって取り込まれた画像（例えば、映像の第１又は較正画像）形態とすることができる。いくつかの実施形態においては、ユーザ１０が、基準要素２０を有する手持ち式物体１２と共にカメラ２２の視界領域に入ったことを示すことができるモーションセンサ又は他の適切なセンサは、この指示を提供することができる。
プロセスブロック２１４において、プロセッサ４８は、較正位置８０を受け取る。具体的には、較正位置８０は、構造体１５上に固定すること又はプロセッサ４８によって構造体１５上に表示することができるので、較正位置８０は、予め定められておりプロセッサ４８には既知とすることができる。
プロセスブロック２１６において、プロセッサ４８は、手持ち式物体１２の基準要素２０の位置を受け取る。例えば、カメラ２２は、基準要素２０の画像（例えば、カメラ２２によって取り込まれた映像の２番目又はそれ以降の画像）を提供することができる。次にプロセッサ４８は、２次元平面３２上の基準要素２０の位置を決定するよう、基準要素位置検出ロジック５２に命令することができる。
プロセスブロック２１８において、プロセッサ４８は、基準要素２０の位置及び較正位置８０に基づいて１又は２以上の並進係数を決定するよう、並進ロジック５６に命令する。１又は２以上の並進係数は、手持ち式物体１２を向けている場所についてのユーザの知覚と、基準要素２０が２次元平面３２上のどこに位置するかのカメラの決定との間の差を補正することができる。具体的には、並進ロジック５６は、単一ポイント較正プロセスを行うことにより１又は２以上の並進係数を決定することができる。このプロセスには、２次元平面３２上の較正位置を受け取ることと、２次元平面３２上の基準要素２０の位置を受け取ることと（例えば、ユーザ１０が手持ち式物体１２を較正位置に向けるときに対応して)、較正位置と基準要素２０の位置との間の位置の差に基づいて１又は２以上の並進係数を決定することとを含む。
並進ロジック５６は、この差を用いて、基準要素２０の後続の検出位置に適用することができる１又は２以上の並進係数を生成して、基準要素２０の後続の検出位置を移動させ、ユーザ１０が手持ち式物体１２を向けようとしていた場所に対応する手持ち式物体１２の後続の投影ターゲット位置を決定することができる。並進係数は、変換行列の形式で提供することができ、これは基準要素２０の後続の検出位置に適用され、式１に示すように基準要素２０の投影ターゲット位置を生成することができる。
プロセスブロック２２０において、プロセッサ４８は、基準要素２０の位置に基づいてユーザ１０の身長１００を決定するよう、ユーザ身長推定ロジック６０に命令する。プロセスブロック２２２において、プロセッサ４８は、ユーザ１０の身長１００に基づいてユーザ１０の腕の長さ１０４を決定するよう、ユーザの腕の長さ推定ロジック６２に命令する。
プロセスブロック２２４において、プロセッサ４８は、ユーザ１０の腕の長さ１０４に基づいて１又は２以上のスケーリング係数を決定するよう、スケーリングロジック５８に命令する。スケーリングロジック５８は、上記の式２の変換行列でスケーリング係数を提供することができる。スケーリング係数は、初期位置（例えば、較正位置８０）に対する基準要素２０の位置をスケール調整（例えば、乗算）することによって、ユーザの腕の長さ１０４の差を補正することができる。
プロセスブロック２２６において、プロセッサ４８は、基準要素２０の位置、１又は２以上の並進係数、及び１又は２以上のスケーリング係数に基づいて、手持ち式物体１２の投影ターゲット位置を決定するよう、変換ロジック５４に命令する。具体的には、変換ロジック５４は、１又は２以上の並進係数及び１又は２以上のスケーリング係数を含む式２の変換行列を、基準要素２０の位置に適用して、投影ターゲット位置を生成することができる。すなわち、投影ターゲット位置は、ユーザ１０が向けているか又は向けようとしていると知覚する場所に対応することができる。
決定ブロック２２８において、プロセッサ４８は、投影ターゲット位置がユーザインタラクション要素と相関しているか否かを判定する。ユーザインタラクション要素は、ユーザインタラクション体験を実行するトリガとして機能する何らかの適切な目標物とすることができる。例えば、ユーザインタラクション要素は、ユーザ１０が、手持ち式物体１２を向ける場合にユーザインタラクション体験が実行されるようにすることを期待できる、何らかの関心ある特徴を含むことができる。
プロセッサ４８は、投影ターゲット位置がユーザインタラクション要素と相関していると判定した場合、次に、プロセスブロック２３０において、プロセッサ４８は、適切な出力デバイス６６を用いてそれぞれのユーザインタラクション体験を実行するよう、ユーザインタラクションシステム４２に命令する。例えば、出力デバイス６６は、アトラクションのアニメの対象物とすることができ、ユーザインタラクションシステム４２は、アニメの対象物に吠えさせる、鳴かせる、話をさせる、動くようにさせる、点滅させることができる。別の例として、出力デバイス６６は、スピーカーとすることができ、ユーザインタラクションシステム４２は、スピーカーに音響、音声、音楽などを出力させることができる。更に別の例として、出力デバイス６６は、電子ディスプレイとすることができ、ユーザインタラクションシステム４２は、電子ディスプレイに画像の表示、ビデオの再生などを行わせることができる。
プロセッサ４８は、投影ターゲット位置がユーザインタラクション要素と相関していないと判定した場合、決定ブロック２３２において、プロセッサ４８は、基準要素２０の次の位置を受け取ったか否かを判定する。受け取った場合、プロセッサ４８はプロセスブロック２２６を繰り返して、基準要素２０の次の位置、並びにプロセスブロック２１８及び２２４から既に決定されている並進係数及びスケーリング係数に基づいて、手持ち式物体１２の投影ターゲット位置を決定する。
プロセッサ４８は、基準要素２０の次の位置を受け取っていないと判定した場合、プロセッサ４８は、プロセスブロック２１２を繰り返して、手持ち式物体１２を較正するための次の指示を受け取る（例えば、次のユーザ１０から）。このようにして、プロセス２１０は、手持ち式物体１２の投影ターゲット位置を、単一ポイント較正を使用して決定することができ（例えば、投影位置決定システム４４を較正するために、ユーザ１０に手持ち式物体１２を２以上のポイントに向けるよう要求することなく）、これは、手持ち式物体１２を向けている場所についてのユーザの知覚と基準要素２０が２次元平面３２上のどの位置するかのカメラの決定との間の差、並びにユーザの腕の長さ１０４の差の両方を補正する。
更に、投影位置決定システム４４は、図６に示すように、ユーザの腕の動きの弧状性質９２と平坦な２次元平面３２との間の形状の差によって生じる歪みを補正することもできる。図１０は、本開示の実施形態による、この歪みを補正するためのプロセス２４０のフロー図である。プロセス２４０は、この歪みを補正することができる何らかの適切なデバイス、例えば、制御装置４６、プロセッサ４８、及び／又は円弧歪み補正ロジック６４を含む投影位置決定システム４４の何らかの構成要素などによって実行することができる。プロセス２４０は、特定の順序のステップとして説明されるが、本開示では説明されるステップは図示する順序とは異なる順序で実行でき、説明される特定のステップはスキップする又は全く実行しない場合があることが想定されることを理解されたい。いくつかの実施形態においては、プロセス２４０は、メモリデバイス５０などの有形の非一時的なコンピュータ可読媒体に記憶された命令を、プロセッサ４８などのプロセッサを使用して実行することによって実施することができる。
図示するように、プロセスブロック２４２において、プロセッサ４８は、手持ち式物体１２の基準要素２０の位置を受け取る。いくつかの実施形態では、プロセッサ４８は、手持ち式物体１２の投影ターゲット位置を受け取ることができる。
プロセスブロック２４４において、プロセッサ４８は、基準要素２０の位置及び第１の多項式に基づいて水平オフセットを決定する。具体的には、プロセッサ４８は、手持ち式物体１２の投影ターゲット位置を受け取るか又は図９のプロセス２１０を用いて投影ターゲット位置を決定することができる。次にプロセッサ４８は、多項式３又は４を手持ち式物体１２の投影ターゲット位置に適用して、水平オフセットを決定するよう、円弧歪み補正ロジック６４に命令することができる。
プロセスブロック２４６において、プロセッサ４８は、基準要素２０の位置及び第２の多項式に基づいて垂直オフセットを決定する。具体的には、プロセッサ４８は、多項式５又は６を手持ち式物体１２の投影ターゲット位置に適用して、垂直オフセットを決定するよう、円弧歪み補正ロジック６４に命令することができる。
プロセスブロック２４８において、プロセッサ４８は、基準要素２０の位置、水平オフセット、及び垂直オフセットに基づいて、手持ち式物体１２の投影ターゲット位置を決定する。具体的には、プロセッサ４８は、投影ターゲット位置を生成するために、投影ターゲット位置の水平成分（例えば、ｘ座標）に水平オフセットを適用（例えば、加算）し、投影ターゲット位置の垂直成分（例えば、ｙ座標）に垂直オフセットを適用（例えば、加算）するよう、円弧歪み補正ロジック６４に命令することができる。
いくつかの実施形態では、ユーザの腕の動きの弧状性質９２と平坦な２次元平面３２との間の形状の差をより効率的に補正するために、円弧歪み補正ロジック６４は、基準要素２０が位置し得る円弧９２を複数の基準要素ゾーンに分割することができ、その各々がそれぞれの投影ターゲットゾーン（例えば、２次元平面に投影された）に対応することができる。各投影ターゲットゾーンは、その投影ターゲットゾーンに適用される歪みを正確に補正できる多項式のそれぞれのセットに対応することができる。従って、カメラ２２は、基準要素ゾーン内の基準要素２０を検出することができ、円弧歪み補正ロジック６４は、基準要素ゾーンに対応するそれぞれの投影ターゲットゾーンを決定することができ、円弧歪み補正ロジック６４は、それぞれの投影ターゲットゾーンに対応する多項式のそれぞれのセットを基準要素の位置に適用して、基準要素の位置に適用するための１又は２以上のオフセットを決定してこの歪みを補正することができる。このような実施形態においては、図７に示すように、複数の投影ターゲットゾーンが同じサイズである限り、複数の基準要素ゾーンは異なるサイズとすることができ（例えば、基準要素ゾーンが２次元平面３２から遠く離れているほど、基準要素ゾーンのサイズが小さくなる）、或いは図８に示すように、複数の投影ターゲットゾーンが異なるサイズである限り、複数の基準要素ゾーンは同じサイズとすることができる（例えば、投影ターゲットゾーンが基準要素２０から遠く離れているほど、投影ターゲットゾーンのサイズが大きくなる）。
このようにして、プロセス２４０は、ユーザの腕の動きの弧状性質９２及び平坦な２次元平面３２を補正することができる。更に、手持ち式物体１２を向けている場所についてのユーザの知覚と基準要素２０が２次元平面３２上のどこに位置しているかのカメラの決定との間の差、ユーザの腕の長さ１０４の差、及びユーザの腕の動きの弧状性質９２と平坦な２次元平面３２との間の形状の差を補正するために、図１０のプロセス２４０は、図９のプロセス２１０の前、後、又はその一部として実行することができる。
本開示に記載した実施形態は、種々の修正形態及び代替形態の影響を受けやすいが、特定の実施形態は、図面には例示的に示されており、本明細書において詳細に説明されている。しかしながら、本開示はここに開示された特定の形態に限定されるものではないことを理解されたい。本開示は、以下の添付の特許請求の範囲によって定義されるような本開示の精神及び範囲内に含まれる全ての変更、均等物、及び代替物を包含するものとする。
本明細書に示して特許請求する技術は、本技術分野を確実に改善する、従って抽象的なもの、無形のもの又は純粋に理論的なものではない実際的性質の有形物及び具体例を参照し、これらに適用される。さらに、本明細書の最後に添付するいずれかの請求項が、「．．．［機能］を［実行］する手段」又は「．．．［機能］を［実行］するステップ」として指定されている１又は２以上の要素を含む場合、このような要素は米国特許法１１２条（ｆ）に従って解釈すべきである。一方で、他のいずれかの形で指定された要素を含むあらゆる請求項については、このような要素を米国特許法１１２条（ｆ）に従って解釈すべきではない。
１０ ユーザ
１２ 手持ち式物体
１４ ターゲット
１５ 構造体
１６ 第１破線
１７ ターゲット位置
１８ 実際のターゲット位置
１９ 破線
２０ 基準要素
２２ カメラ
２４ 手持ち式物体の端部
２６ 手持ち式物体を保持している端部
２８ ユーザの手
３０ 基準要素の位置
３２ ２次元平面

Claims (22)

  1. 遊園地アトラクションシステムであって、
    ２次元平面上の手持ち式物体の基準要素の映像（ｉｍａｇｅｒｙ）を取り込むように構成されたカメラ、及び、
    ユーザのインタラクティブ体験を出力するように構成された出力デバイス、
    を備える、ユーザインタラクションシステムと、
    前記ユーザインタラクションシステムに通信可能に結合された投影位置決定システムと、
    を備え、
    前記投影位置決定システムは、
    較正位置と前記映像で取り込まれた前記２次元平面上の前記基準要素の初期位置との間の位置の差を表す１又は２以上の並進係数を決定するように構成された並進ロジックと、
    前記映像に基づいて、ユーザの腕の長さに相関する１又は２以上のスケーリング係数を決定するように構成されたスケーリングロジックと、
    プロセッサ及びメモリを有する制御装置と、
    を備え、
    前記メモリは、
    前記映像で取り込まれた前記２次元平面上の前記基準要素の位置を決定し、
    前記基準要素の位置、前記１又は２以上の並進係数、及び前記１又は２以上のスケーリング係数に基づいて、前記手持ち式物体の投影ターゲット位置を決定し、
    前記投影ターゲット位置がターゲット位置に対応するという決定に応答して、前記ユーザインタラクティブ体験を出力するよう出力デバイスに命令する、
    ことを前記プロセッサに行わせるように構成された機械可読命令を記憶する、
    遊園地アトラクションシステム。
  2. 前記並進ロジックは、前記映像の第１の画像に基づいて前記１又は２以上の並進係数及び前記１又は２以上のスケーリング係数を決定するように構成される、請求項１に記載の遊園地アトラクションシステム。
  3. 前記機械可読命令は、前記プロセッサに、前記映像の第２の画像に基づいて前記基準要素の位置を決定させるように構成される、請求項２に記載の遊園地アトラクションシステム。
  4. 前記１又は２以上の並進係数は、３次元空間で前記手持ち式物体が向いている場所についてのユーザの知覚と、前記２次元平面内の前記基準要素の対応する位置との間の差を補正するように構成される、請求項１に記載の遊園地アトラクションシステム。
  5. 前記１又は２以上のスケーリング係数は、ユーザの腕の長さの差を補正するように構成される、請求項１に記載の遊園地アトラクションシステム。
  6. 前記スケーリングロジックは、前記２次元平面上の前記基準要素の位置に基づいて、前記１又は２以上のスケーリング係数を決定するように構成される、請求項１に記載の遊園地アトラクションシステム。
  7. 前記スケーリングロジックは、
    前記２次元平面上の前記基準要素の位置に基づいてユーザの身長を決定し、
    前記ユーザの身長に基づいて前記ユーザの腕の長さを決定する、
    ように構成される、請求項１に記載の遊園地アトラクションシステム。
  8. 前記投影ターゲット位置及び１又は２以上の多項式に基づいて１又は２以上のオフセットを決定し、
    前記１又は２以上のオフセットを前記投影ターゲット位置に適用する、
    ように構成された円弧歪み補正ロジックを備え、
    前記機械可読命令は、前記１又は２以上のオフセットを前記投影ターゲット位置に適用後、前記投影ターゲット位置が前記２次元平面上のターゲット位置に対応するという決定に応答して、前記出力デバイスに前記ユーザインタラクティブ体験を出力するよう前記プロセッサに命令させるように構成される、請求項１に記載の遊園地アトラクションシステム。
  9. 前記１又は２以上のオフセットは、ユーザの腕の動きの弧状性質と前記２次元平面との間の形状の差を補正するように構成される、請求項９に記載の遊園地アトラクションシステム。
  10. １又は２以上の多項式は３次式である、請求項９に記載の遊園地アトラクションシステム。
  11. インタラクティブ体験のためのターゲットトラッキングシステムであって、前記ターゲットトラッキングシステムは、
    ２次元平面上に表示された較正位置と、前記２次元平面上の前記較正位置に向けるときの第１の画像内の手持ち式物体の基準要素の初期位置との間の位置の差を表す１又は２以上の並進係数を決定するように構成された並進ロジックと、
    前記第１の画像に基づいて、ユーザの腕の長さに相関する１又は２以上のスケーリング係数を決定するように構成されたスケーリングロジックと、
    プロセッサ及び機械可読命令を記憶したメモリを有する制御装置と、
    を備え、前記機械可読命令は、
    前記２次元平面上の第２の画像内の前記基準要素の位置を決定し、
    前記基準要素の位置、前記１又は２以上の並進係数、及び前記１又は２以上のスケーリング係数に基づいて、前記手持ち式物体の投影ターゲット位置を決定し、
    前記投影ターゲット位置がターゲット位置に対応するという決定に応答して、ユーザインタラクティブ体験を出力する、
    ことを前記プロセッサに行わせるように構成される、
    ターゲットトラッキングシステム。
  12. 前記機械可読命令は、前記１又は２以上の並進係数及び前記１又は２以上のスケーリング係数を含む変換行列を前記プロセッサに決定させるように構成される、請求項１２に記載のターゲットトラッキングシステム。
  13. 前記機械可読命令は、前記基準要素の位置に前記変換行列を適用することによって、前記プロセッサに前記手持ち式物体の前記投影ターゲット位置を決定させるように構成される、請求項１３に記載のターゲットトラッキングシステム。
  14. 前記１又は２以上の並進係数は水平成分を含み、前記機械可読命令は、前記較正位置と前記基準要素の初期位置との間の水平方向の差に基づいて、前記プロセッサに前記水平成分を決定させるように構成される、請求項１２に記載のターゲットトラッキングシステム。
  15. 前記１又は２以上の並進係数は垂直成分を含み、前記機械可読命令は、前記較正位置と前記基準要素の初期位置との間の垂直方向の差に基づいて、前記プロセッサに前記垂直成分を決定させるように構成される、請求項１５に記載のターゲットトラッキングシステム。
  16. 前記１又は２以上のスケーリング係数は水平成分を含み、前記機械可読命令は、前記ユーザの腕の長さに基づいて、前記プロセッサに前記水平成分を決定させるように構成される、請求項１２に記載のターゲットトラッキングシステム。
  17. 前記１又は２以上のスケーリング係数は垂直成分を含み、前記機械可読命令は、前記ユーザの腕の長さに基づいて、前記プロセッサに前記垂直成分を決定させるように構成される、請求項１７に記載のターゲットトラッキングシステム。
  18. インタラクティブ体験を提供する方法であって、
    ２次元平面上の較正位置を受け取るステップと、
    映像（ｉｍａｇｅｒｙ）で取り込まれた前記２次元平面上の手持ち式物体の基準要素の初期位置を受け取るステップと、
    前記較正位置及び前記基準要素の初期位置に基づいて、１又は２以上の並進係数を決定するステップと、
    前記基準要素の初期位置に基づいて、１又は２以上のスケーリング係数を決定するステップと、
    前記映像で取り込まれた前記２次元平面上の前記基準要素の位置を決定するステップと、
    前記基準要素の位置、前記１又は２以上の並進係数、及び前記１又は２以上のスケーリング係数に基づいて、前記手持ち式物体の投影ターゲット位置を決定するステップと、
    前記投影ターゲット位置がターゲット位置に対応するという決定に応答して、ユーザインタラクティブ体験を出力するステップと、
    を含む方法。
  19. 前記１又は２以上の並進係数を決定するステップは、前記較正位置と前記２次元平面上の前記基準要素の初期位置との間の差に基づく、請求項１９に記載のインタラクティブ体験を提供する方法。
  20. 前記基準要素の初期位置に基づいて、ユーザの身長を決定するステップを含む、請求項１９に記載のインタラクティブ体験を提供する方法。
  21. 前記ユーザの身長に基づいて、ユーザの腕の長さを決定するステップを含む、請求項２１に記載のインタラクティブ体験を提供する方法。
  22. 前記１又は２以上のスケーリング係数を決定するステップは、前記ユーザの身長に基づく、請求項２２に記載のインタラクティブ体験を提供する方法。
JP2022519294A 2019-09-25 2020-09-21 手持ち式物体の投影ターゲット位置を決定するためのシステム及び方法 Pending JP2022550739A (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201962905901P 2019-09-25 2019-09-25
US62/905,901 2019-09-25
US16/749,865 US11100790B2 (en) 2019-09-25 2020-01-22 Systems and methods for determining projected target location of a handheld object
US16/749,865 2020-01-22
PCT/US2020/051843 WO2021061572A1 (en) 2019-09-25 2020-09-21 Systems and methods for determining projected target location of a handheld object

Publications (2)

Publication Number Publication Date
JP2022550739A true JP2022550739A (ja) 2022-12-05
JPWO2021061572A5 JPWO2021061572A5 (ja) 2023-10-02

Family

ID=74881094

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022519294A Pending JP2022550739A (ja) 2019-09-25 2020-09-21 手持ち式物体の投影ターゲット位置を決定するためのシステム及び方法

Country Status (7)

Country Link
US (3) US11100790B2 (ja)
EP (1) EP4034271A1 (ja)
JP (1) JP2022550739A (ja)
KR (1) KR20220066156A (ja)
CN (1) CN114466685A (ja)
CA (1) CA3150640A1 (ja)
WO (1) WO2021061572A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102225342B1 (ko) * 2019-02-13 2021-03-09 주식회사 브이터치 객체 제어를 지원하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체
US11100790B2 (en) * 2019-09-25 2021-08-24 Universal City Studios Llc Systems and methods for determining projected target location of a handheld object
US20230278488A1 (en) * 2022-03-02 2023-09-07 Jill Lenore Morgan Device and Method for Locating a Parked Vehicle
US20240085987A1 (en) * 2022-09-12 2024-03-14 Apple Inc. Environmentally Aware Gestures

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7445550B2 (en) 2000-02-22 2008-11-04 Creative Kingdoms, Llc Magical wand and interactive play experience
US6761637B2 (en) * 2000-02-22 2004-07-13 Creative Kingdoms, Llc Method of game play using RFID tracking device
US6990639B2 (en) * 2002-02-07 2006-01-24 Microsoft Corporation System and process for controlling electronic components in a ubiquitous computing environment using multimodal integration
US7854655B2 (en) * 2002-07-27 2010-12-21 Sony Computer Entertainment America Inc. Obtaining input for controlling execution of a game program
US20100199228A1 (en) 2009-01-30 2010-08-05 Microsoft Corporation Gesture Keyboarding
US8487871B2 (en) 2009-06-01 2013-07-16 Microsoft Corporation Virtual desktop coordinate transformation
CA2798148A1 (en) 2010-05-04 2011-11-10 Timocco Ltd. System and method for tracking and mapping an object to a target
US10134267B2 (en) 2013-02-22 2018-11-20 Universal City Studios Llc System and method for tracking a passive wand and actuating an effect based on a detected wand path
CN103247031B (zh) 2013-04-19 2016-03-09 华为技术有限公司 一种畸变图像校正的方法、终端及系统
KR101332741B1 (ko) 2013-04-23 2013-11-25 (주) 에핀 아케이드 건 인터렉션 시스템
WO2015008164A2 (en) 2013-06-27 2015-01-22 Eyesight Mobile Technologies Ltd. Systems and methods of direct pointing detection for interaction with a digital device
US9463379B1 (en) 2013-12-17 2016-10-11 Thinkwell Group Ride vehicle mounted interactive game system
US10269257B1 (en) 2015-08-11 2019-04-23 Gopro, Inc. Systems and methods for vehicle guidance
US11100790B2 (en) * 2019-09-25 2021-08-24 Universal City Studios Llc Systems and methods for determining projected target location of a handheld object

Also Published As

Publication number Publication date
US20210327259A1 (en) 2021-10-21
WO2021061572A1 (en) 2021-04-01
US20220327916A1 (en) 2022-10-13
US11100790B2 (en) 2021-08-24
EP4034271A1 (en) 2022-08-03
US11663906B2 (en) 2023-05-30
KR20220066156A (ko) 2022-05-23
CN114466685A (zh) 2022-05-10
US11436916B2 (en) 2022-09-06
US20210090429A1 (en) 2021-03-25
CA3150640A1 (en) 2021-04-01

Similar Documents

Publication Publication Date Title
JP2022550739A (ja) 手持ち式物体の投影ターゲット位置を決定するためのシステム及び方法
Wilson et al. Steerable augmented reality with the beamatron
JP6622395B2 (ja) バーチャルリアリティ画像を調整する方法及び装置
US10269139B2 (en) Computer program, head-mounted display device, and calibration method
US11156843B2 (en) End-to-end artificial reality calibration testing
US8388146B2 (en) Anamorphic projection device
KR101827046B1 (ko) 모션 센서 데이터에 기초한 3d 모델들을 계산하도록 구성된 이동 디바이스
US10326894B1 (en) Self stabilizing projector
CN113412614A (zh) 使用深度图像的三维定位
KR20200055010A (ko) 헤드 마운트 디스플레이 추적 시스템
JP2020531965A (ja) 支援型の拡張現実
CN108718373A (zh) 影像装置
US9049369B2 (en) Apparatus, system and method for projecting images onto predefined portions of objects
US10412527B1 (en) Head-related transfer function determination using base stations
CN107993292B (zh) 增强现实场景复原方法、装置及计算机可读存储介质
CN207854012U (zh) 基于结构光的深度相机
CN106843790B (zh) 一种信息展示系统和方法
CN102004623A (zh) 一种三维图像显示装置及方法
CN109981932A (zh) 基于结构光的深度相机及其校正方法
US11127212B1 (en) Method of projecting virtual reality imagery for augmenting real world objects and surfaces
JP2014178124A (ja) ３次元計測システム、プログラム及び方法。
TWI812369B (zh) 控制方法、追蹤系統以及非暫態電腦可讀取媒體
US10013736B1 (en) Image perspective transformation system
US20250053245A1 (en) Six-degree of Freedom Pose Estimation of a Stylus
US20250053249A1 (en) Six-degree of Freedom Pose Estimation of a Stylus

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230921

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230921

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240821

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240822

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20241122