JP2019522187A - 装置および関連する方法 - Google Patents
装置および関連する方法 Download PDFInfo
- Publication number
- JP2019522187A JP2019522187A JP2018563019A JP2018563019A JP2019522187A JP 2019522187 A JP2019522187 A JP 2019522187A JP 2018563019 A JP2018563019 A JP 2018563019A JP 2018563019 A JP2018563019 A JP 2018563019A JP 2019522187 A JP2019522187 A JP 2019522187A
- Authority
- JP
- Japan
- Prior art keywords
- tag
- locator
- positioning system
- wireless signal
- determination
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S3/00—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
- G01S3/02—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using radio waves
- G01S3/023—Monitoring or calibrating
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
- G01S5/01—Determining conditions which influence positioning, e.g. radio environment, state of motion or energy consumption
- G01S5/018—Involving non-radio wave signals or measurements
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
- G01S5/02—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using radio waves
- G01S5/0205—Details
- G01S5/0226—Transmitters
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
- G01S5/02—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using radio waves
- G01S5/0205—Details
- G01S5/0244—Accuracy or reliability of position solution or of measurements contributing thereto
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
- G01S5/02—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using radio waves
- G01S5/0247—Determining attitude
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
- G01S5/02—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using radio waves
- G01S5/0257—Hybrid positioning
- G01S5/0268—Hybrid positioning by deriving positions from different combinations of signals or of estimated positions in a single positioning system
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
- User Interface Of Digital Computer (AREA)
- Position Fixing By Use Of Radio Waves (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
タグを有する物体へ向かう方向の判断に関して、空間の視覚画像を捕捉しているカメラにより観測された物体の向きを備える物体向き情報と、物体上のタグが取り付けられているポジションを備える所定のタグポジション情報とに基づいて、タグが実質的にロケータに面するように物体が向いているか否かを判断する。さらにその結果として、物体へ向かう方向を判断するためのワイヤレス信号の実用性を少なくとも判断することにおいて測位システムを制御する。タグが実質的にロケータに面していることは、ワイヤレス信号の実用性を示す。【選択図】図1
Description
本開示は、物体の方向判断の分野、関連する方法、コンピュータプログラム、および装置に関する。開示される特定の側面/例は、物体への方向を判断するに当たっての、物体に取り付けられたタグから受信されるワイヤレス信号の実用性の判断を提供するために、視覚画像に基づく物体の向きを使用することに関する。
測位システムは、空間内の物体のポジションを判断するために使用される。測位システムは、物体へ向かう方向を判断するために、物体に取り付けられた測位タグからワイヤレス信号を受信するよう構成された、空間内の少なくとも1つのロケータを使用してもよい。ワイヤレス信号は、物体自体による減衰、および空間内のさらなる物体からの減衰/反射などにより、それが空間中をロケータまで伝播することによる影響を受けることもあり、これが、測位システムにより判断される方向の精度に悪影響を与えることもある。
本明細書における以前に公開された文書または任意の背景の列挙または説明は、必ずしも、その文書または背景が最新技術の一部であることまたは一般知識であることの自認と理解されてはならない。本開示の1つ以上の側面/例は、背景の課題の1つ以上に対処することもしないこともある。
第1の例示の側面では、
少なくとも1つのプロセッサと、
コンピュータプログラムコードを含む少なくとも1つのメモリと、
を備える装置が提供され、少なくとも1つのメモリおよびコンピュータプログラムコードは、少なくとも1つのプロセッサとともに、装置に少なくとも以下のこと:
空間内の物体へ向かう方向の判断であって、物体は、測位システムの少なくとも1つのロケータによる受信のためにワイヤレス信号を放出でき物体に取り付けられた測位タグを有し、測位システムは、ワイヤレス信号に基づいて測位タグへ向かう方向を、さらにその結果として物体の方向を判断するよう構成され、物体は、空間を自由に動き回ることができる、方向の判断に関して、
物体が存在している空間の視覚画像を捕捉しているカメラにより観測された物体の向きを備える物体向き情報と、物体上の測位タグが取り付けられているポジションを備える所定のタグポジション情報とに基づいて、
測位タグが実質的にロケータに面するように物体が向いているか否かの判断を少なくとも提供することであって、それによって、物体へ向かう方向を判断するためのワイヤレス信号の実用性を少なくとも判断することにおいて測位システムの制御を提供するべく、判断を提供することであって、測位タグが実質的にロケータに面していることは、ワイヤレス信号の実用性を示す、判断を提供すること、
を実行させるよう構成される。
少なくとも1つのプロセッサと、
コンピュータプログラムコードを含む少なくとも1つのメモリと、
を備える装置が提供され、少なくとも1つのメモリおよびコンピュータプログラムコードは、少なくとも1つのプロセッサとともに、装置に少なくとも以下のこと:
空間内の物体へ向かう方向の判断であって、物体は、測位システムの少なくとも1つのロケータによる受信のためにワイヤレス信号を放出でき物体に取り付けられた測位タグを有し、測位システムは、ワイヤレス信号に基づいて測位タグへ向かう方向を、さらにその結果として物体の方向を判断するよう構成され、物体は、空間を自由に動き回ることができる、方向の判断に関して、
物体が存在している空間の視覚画像を捕捉しているカメラにより観測された物体の向きを備える物体向き情報と、物体上の測位タグが取り付けられているポジションを備える所定のタグポジション情報とに基づいて、
測位タグが実質的にロケータに面するように物体が向いているか否かの判断を少なくとも提供することであって、それによって、物体へ向かう方向を判断するためのワイヤレス信号の実用性を少なくとも判断することにおいて測位システムの制御を提供するべく、判断を提供することであって、測位タグが実質的にロケータに面していることは、ワイヤレス信号の実用性を示す、判断を提供すること、
を実行させるよう構成される。
1つ以上の例において、装置には、物体がタグとロケータとの間の見通し線を妨害しないとの判断によって、タグが実質的にロケータに面するように物体が向いているか否かを少なくとも判断させる。
1つ以上の実施形態において、タグが実質的にロケータから離れる方に面するように物体が向いており、その結果として、測位システムによる方向の判断において使用するための実用性が前記タグからのワイヤレス信号にないという判断に基づいて、ワイヤレス信号を使用する手段以外の手段によって物体へ向かう方向の判断を提供する。
1つ以上の例において、ワイヤレス信号に実用性がないときは少なくとも、装置には、カメラからの視覚画像を使用した物体の視覚追跡に基づいて、物体へ向かう方向の判断を提供させる。
1つ以上の実施形態において、物体は、人物を含み、タグが実質的にロケータに面するように物体が向いているか否かを少なくとも判断することは、
i)顔検出、
ii)体の向きの検出、
iii)骨格モーション追跡
のうちの1つ以上に基づく。
i)顔検出、
ii)体の向きの検出、
iii)骨格モーション追跡
のうちの1つ以上に基づく。
1つ以上の例において、装置は、視覚画像内の物体の外観をモデルと比較して向きを判断できるように、物体の形状の所定のモデルに基づき物体の向きの判断を提供するよう構成される。
1つ以上の実施形態において、物体に、少なくとも第1のタグおよび第2のタグを備える2つ以上のタグが提供され、第1および第2のタグは、物体上の別々のポジションに取り付けられ、所定のタグポジション情報は、第1のタグが取り付けられている物体上のポジションおよび第2のタグが取り付けられている物体上のポジションを備え、装置には、第1のタグおよび第2のタグのどちらが実質的にロケータに面するかの判断を提供することであって、それによって、第1のタグからのワイヤレス信号および第2のタグからのワイヤレス信号のうちどちらに物体のポジションを位置特定するための実用性があるかの判断において測位システムの制御を提供するべく、判断を提供すること、をさせる。
1つ以上の例において、第1のタグおよび第2のタグは、物体の実質的に対向する側面に取り付けられる。
1つ以上の実施形態において、第1のタグおよび第2のタグは、3つ以上のタグを備えたループの一部を構成し、ループは、物体の周りに取り付けるよう構成され、所定のタグポジション情報は、3つ以上のタグそれぞれが取り付けられている物体上のポジションを備え、装置には、3つ以上のタグのうち、測位システムによる物体へ向かう方向の判断において使用するための、実用性のあるワイヤレス信号(単数または複数)を提供する少なくとも1つのタグの判断を提供させる。
1つ以上の実施形態において、装置には、物体とロケータとの間の見通し線がさらなる物体により遮蔽されているか否かを判断させ、見通し線の存在は、物体のポジションを位置特定するためのワイヤレス信号の実用性を示す。
1つ以上の実施形態において、さらなる物体に、測位システムの少なくとも1つのロケータによる受信のためにワイヤレス信号を放出できさらなる物体に取り付けられたさらなるタグが提供され、物体とロケータとの間の見通し線がさらなる物体により遮蔽されているとの判断に基づいて、物体がさらなる物体により遮蔽されている間は少なくとも、測位システムにより、さらなるタグの位置を使用して物体の位置の判断を提供する。
1つ以上の実施形態において、カメラとロケータとは同一場所に設置されている。1つ以上の実施形態において、カメラおよびロケータは同一場所に設置されておらず、カメラに対するロケータの位置が装置に提供され、装置には、視覚画像に基づいて、ロケータの視点からの物体の向きの判断を提供させる。
1つ以上の例において、物体は人物を含む。
1つ以上の例において、カメラは仮想現実コンテンツ捕捉カメラを備える。
1つ以上の例において、測位システムは、ロケータに対する空間内のタグの位置を判断するよう構成される。
1つ以上の例において、測位システムは、既知の異なる位置に2つ以上のロケータを含み、装置には、物体向き情報および所定のタグポジションに基づいて、各ロケータのワイヤレス信号の実用性の判断を提供させる。
1つ以上の実施形態において、装置には、物体へ向かう方向を判断する前に、較正段階を提供させ、較正段階は、カメラからの視覚画像と、物体に取り付けられたタグの位置を特定しカメラに提示される所定のジェスチャとに基づいて、所定のタグポジション情報の生成を提供することを少なくとも含む。
1つ以上の例において、較正段階はさらに、カメラからの視覚画像と、カメラに提示される所定のジェスチャとに基づいて、物体の特定を提供することを含む。1つ以上の他の例において、視覚画像内の物体の視覚的特定を可能にする情報が装置に提供されてもよい。
1つ以上の実施形態において、装置には、物体から受信されるオーディオと、測位システムにより判断される物体の位置とを使用して、スペーシャルオーディオミキシングを提供させる。
さらなる側面において、少なくとも1つのロケータによる受信のためのワイヤレス信号を放出できるタグを使用して物体へ向かう方向を少なくとも判断するために、少なくとも1つのロケータを備える測位システムを備えたシステムが提供され、タグは、物体に取り付けられるよう構成され、カメラは、物体が存在する空間の画像を捕捉するようになっており、システムはさらに、第1の例示の側面の装置を備える。
さらなる側面において、カメラと測位システムとを備える仮想現実コンテンツ捕捉装置が提供され、測位システムは、少なくとも1つのロケータおよび少なくとも1つのタグを備え、測位システムは、空間内の物体の位置を判断するよう構成され、タグは、物体に取り付けられて、測位システムの少なくとも1つのロケータによる受信のためにワイヤレス信号を放出できるよう構成され、測位システムは、ワイヤレス信号に基づいてタグの位置、さらにその結果として物体の位置を判断するよう構成され、物体は、空間を自由に動き回ることができ、測位システムは、第1の例示の側面の装置を含む。
さらなる側面において、
空間内の物体へ向かう方向の判断であって、物体は、測位システムの少なくとも1つのロケータによる受信のためにワイヤレス信号を放出でき物体に取り付けられたタグを有し、測位システムは、ワイヤレス信号に基づいてタグへ向かう方向を、さらにその結果として物体の方向を判断するよう構成され、物体は、空間を自由に動き回ることができる、方向の判断に関して、
物体が存在している空間の視覚画像を捕捉しているカメラにより観測された物体の向きを備える物体向き情報と、物体上のタグが取り付けられているポジションを備える所定のタグポジション情報とに基づいて、
タグが実質的にロケータに面するように物体が向いているか否かの判断を少なくとも提供することであって、それによって、物体へ向かう方向を判断するためのワイヤレス信号の実用性を少なくとも判断することにおいて測位システムの制御を提供するべく、判断を提供することであって、タグが実質的にロケータに面していることは、ワイヤレス信号の実用性を示す、判断を提供すること、
を含む方法が提供される。
空間内の物体へ向かう方向の判断であって、物体は、測位システムの少なくとも1つのロケータによる受信のためにワイヤレス信号を放出でき物体に取り付けられたタグを有し、測位システムは、ワイヤレス信号に基づいてタグへ向かう方向を、さらにその結果として物体の方向を判断するよう構成され、物体は、空間を自由に動き回ることができる、方向の判断に関して、
物体が存在している空間の視覚画像を捕捉しているカメラにより観測された物体の向きを備える物体向き情報と、物体上のタグが取り付けられているポジションを備える所定のタグポジション情報とに基づいて、
タグが実質的にロケータに面するように物体が向いているか否かの判断を少なくとも提供することであって、それによって、物体へ向かう方向を判断するためのワイヤレス信号の実用性を少なくとも判断することにおいて測位システムの制御を提供するべく、判断を提供することであって、タグが実質的にロケータに面していることは、ワイヤレス信号の実用性を示す、判断を提供すること、
を含む方法が提供される。
さらなる側面において、コンピュータ可読媒体上に記憶されたコンピュータプログラムコードを備える、コンピュータ可読媒体が提供され、コンピュータ可読媒体およびコンピュータプログラムコードは、少なくとも1つのプロセッサ上で実行されると少なくとも以下のこと:
空間内の物体へ向かう方向の判断であって、物体は、測位システムの少なくとも1つのロケータによる受信のためにワイヤレス信号を放出でき物体に取り付けられたタグを有し、測位システムは、ワイヤレス信号に基づいてタグへ向かう方向を、さらにその結果として物体の方向を判断するよう構成され、物体は、空間を自由に動き回ることができる、方向の判断に関して、
物体が存在している空間の視覚画像を捕捉しているカメラにより観測された物体の向きを備える物体向き情報と、物体上のタグが取り付けられているポジションを備える所定のタグポジション情報とに基づいて、
タグが実質的にロケータに面するように物体が向いているか否かの判断を少なくとも提供することであって、それによって、物体へ向かう方向を判断するためのワイヤレス信号の実用性を少なくとも判断することにおいて測位システムの制御を提供するべく、判断を提供することであって、タグが実質的にロケータに面していることは、ワイヤレス信号の実用性を示す、判断を提供すること、
を実行するよう構成される。
空間内の物体へ向かう方向の判断であって、物体は、測位システムの少なくとも1つのロケータによる受信のためにワイヤレス信号を放出でき物体に取り付けられたタグを有し、測位システムは、ワイヤレス信号に基づいてタグへ向かう方向を、さらにその結果として物体の方向を判断するよう構成され、物体は、空間を自由に動き回ることができる、方向の判断に関して、
物体が存在している空間の視覚画像を捕捉しているカメラにより観測された物体の向きを備える物体向き情報と、物体上のタグが取り付けられているポジションを備える所定のタグポジション情報とに基づいて、
タグが実質的にロケータに面するように物体が向いているか否かの判断を少なくとも提供することであって、それによって、物体へ向かう方向を判断するためのワイヤレス信号の実用性を少なくとも判断することにおいて測位システムの制御を提供するべく、判断を提供することであって、タグが実質的にロケータに面していることは、ワイヤレス信号の実用性を示す、判断を提供すること、
を実行するよう構成される。
さらなる側面では、
空間内の物体へ向かう方向の判断であって、物体は、測位システムの少なくとも1つのロケータによる受信のためにワイヤレス信号を放出でき物体に取り付けられたタグを有し、測位システムは、ワイヤレス信号に基づいてタグへ向かう方向を、さらにその結果として物体の方向を判断するよう構成され、物体は、空間を自由に動き回ることができる、方向の判断に関して、
物体が存在している空間の視覚画像を捕捉しているカメラにより観測された物体の向きを備える物体向き情報と、物体上のタグが取り付けられているポジションを備える所定のタグポジション情報とに基づいて、
タグが実質的にロケータに面するように物体が向いているか否かの判断を少なくとも提供することであって、それによって、物体へ向かう方向を判断するためのワイヤレス信号の実用性を少なくとも判断することにおいて測位システムの制御を提供するべく、判断を提供することであって、タグが実質的にロケータに面していることは、ワイヤレス信号の実用性を示す、判断を提供すること、
のための手段を備える装置が提供される。
空間内の物体へ向かう方向の判断であって、物体は、測位システムの少なくとも1つのロケータによる受信のためにワイヤレス信号を放出でき物体に取り付けられたタグを有し、測位システムは、ワイヤレス信号に基づいてタグへ向かう方向を、さらにその結果として物体の方向を判断するよう構成され、物体は、空間を自由に動き回ることができる、方向の判断に関して、
物体が存在している空間の視覚画像を捕捉しているカメラにより観測された物体の向きを備える物体向き情報と、物体上のタグが取り付けられているポジションを備える所定のタグポジション情報とに基づいて、
タグが実質的にロケータに面するように物体が向いているか否かの判断を少なくとも提供することであって、それによって、物体へ向かう方向を判断するためのワイヤレス信号の実用性を少なくとも判断することにおいて測位システムの制御を提供するべく、判断を提供することであって、タグが実質的にロケータに面していることは、ワイヤレス信号の実用性を示す、判断を提供すること、
のための手段を備える装置が提供される。
本開示は、1つ以上の対応する側面、例、または特徴を、単独または様々な組み合わせで含み、これは、その組み合わせまたは単独で特に記載(特許請求を含む)されたか否かにかかわらない。記載された機能のうちの1つ以上を実行する対応する手段および対応する機能ユニット(例えば着信ロケータの単一方向)も、本開示の範囲内にある。
開示された方法の1つ以上を実装する対応するコンピュータプログラムも本開示の範囲内にあり、記載された例のうちの1つ以上に含まれる。
上記の概要は、単なる例示であり非限定的なものとして意図されている。
以下、単なる例として、添付の図面を参照しながら説明を行う。
測位システムは、物体のポジションを判断するために1つ以上のロケータにより取得された測定値を使用してもよい。例示の測位システムでは、1つ以上のロケータが、空間内の異なる地理的位置に配置される。物体へ向かう方向および/または空間内の物体の位置を特定するために、物体は、ロケータにより受信可能なワイヤレス信号を放出できるタグに関連付けられてもよい。受信された信号の特性の測定は、ロケータに対する空間内でのタグのポジションを位置特定するために、三角測量法または到来方向法などにより使用され得る。測位システムは、物体へ向かう方向を判断してもよく、さらに/または空間内の物体の位置を判断してもよい。ロケータの配置に対するタグの位置を測位システムが判断するために、ロケータ同士の相対ポジションが較正される必要がある場合がある。
1つ以上の例において、タグからの帰還信号が測位システムにおいて使用されてもよい。例えばロケータは、ブロードキャスト信号を放出してもよく、タグは、信号を受信すると、当該タグへの方向が信号から判断可能な該信号により応答してもよい。タグは、帰還信号を送信するためにブロードキャスト信号のエネルギーを使用するという点において、パッシブであってもよい。他の例では、タグは、帰還信号の放出において使用するためのそれ自体の電源を含んでもよく、タグは帰還信号の放出を、ロケータのブロードキャスト信号とは少なくとも独立して行ってもよい。帰還信号は、種々のロケータから取得された測定値が照合されて同一物体の総合的な測位において使用されることを可能にする、タグの固有識別子を含んでもよい。そのような帰還信号に基づくシステムの例には、無線周波数識別(RFID:Radio Frequency Identification)タグに基づくシステムが含まれる。
測位システムは、複数の到来方向(DoA:Direction of Arrival)ロケータを備えてもよく、複数のDoAロケータのポジションにより定義される局所座標空間の中でのタグの位置を特定するために、角度測定値が使用されてもよい。大域座標空間における測位システムの位置が既知であれば、タグの地理的位置が判断され得る(経度、緯度、および高度などの観点から)。
仮想現実(VR:virtual reality)コンテンツとして提示するために空間を捕捉する場合、空間内に出現する物体を追跡することが望ましいかもしれない。測位システムは、仮想または拡張現実のコンテンツを捕捉するときに空間内のマイクロフォンの位置および/またはマイクロフォンへ向かう方向を特定するために使用されてもよい。物体へ向かう方向とは、カメラの視点からの方向、すなわちVR視覚画像の視点から物体へ向かう方向であってもよい。例えば、仮想現実コンテンツは、スペーシャルオーディオを含んでもよく、オーディオは、VRコンテンツの視覚画像における関連ポジションに対応する方向から生じるものとして知覚されるように、VRコンテンツの消費者に提示される。したがって、女優の声は、ダイアログを話しているその女優の画像が表示されている方向と同じ方向から来るように提示されてもよい。そのようなスペーシャルオーディオを提供するには、仮想現実コンテンツの捕捉中、物体、女優、男優、楽器など、またはその個人用マイクロフォンの位置が追跡される必要があるかもしれない。したがって、マイクロフォンの位置/方向は、ユーザに対するコンテンツの提示で使用するスペーシャルまたは3−dオーディオエフェクトをレンダリングするために、または仮想現実コンテンツ捕捉デバイス(Nokia Technologies OyのNokia OZOなど)のカメラにより捕捉される視覚画像におけるオーディオの発生源を特定するために、使用されてもよい。本願明細書に記載される測位システムは、特に、仮想現実コンテンツの捕捉中にシーン内のマイクロフォンなどの物体を位置特定する、仮想現実コンテンツ測位システムであってもよい。したがって、測位システムは、マイクロフォン測位システムを備えてもよい。当然のことながら、測位システムには、オーディオ発生源測位、屋内測位、および測位全般など、仮想現実コンテンツ捕捉の分野外でのより一般的な用途もある。
図1は、或る空間内に存在する人物を含む物体100を示す。人物100は、仮想現実コンテンツ捕捉デバイス101(より一般的にはカメラ)により捕捉されている。空間内の人物100へ向かう方向および/または人物100の位置が、(部分的に)ロケータ102により判断される。本例では、ロケータ102はたまたま、VRコンテンツ捕捉デバイス101と同一場所に設置されている。人物100には測位タグ103が取り付けられており、測位タグ103は、人物100へ向かう方向を判断するためにロケータ102により受信可能なワイヤレス信号を放出するよう構成される。典型的には、タグ103はVRコンテンツ捕捉デバイス101には見えず、ここでは、理解のために図面中に図によって示されている。ロケータ102は、ワイヤレス信号を受信するためのアンテナおよび関連する回路構成を備えてもよい。1つ以上の例において、ロケータ102は、実際には、回路構成は他の場所に配置された状態で、ロケータのアンテナを備えてもよい。ロケータ102は、本例では、VRコンテンツ捕捉デバイス101に対して相対的な、物体100へ向かう方向を判断する、測位システム104の一部を構成する。測位システム104は、1つ以上のロケータ102からデータを受信して、物体100へ向かう方向および/または物体100の位置を判断し、さらに任意選択で、そのデータを、VRコンテンツ捕捉デバイス101により捕捉されたVRコンテンツとともに記録するためまたは先へ送信するために提供するよう構成される。データは、スペーシャルオーディオまたは物体追跡のために使用されてもよい。
物体100へ向かう方向を判断するに当たっての、タグ103からのワイヤレス信号の実用性を少なくとも判断することにおいて、測位システム104の制御を提供する装置105が示されている。
装置105は、ワイヤレス通信(例えばWifiまたはBluetooth(登録商標))などにより、1つまたは複数のロケータ102それぞれと通信している。本例では、ロケータは、センサとして動作し、方向判断、および任意選択でタグ103の測位のための処理は、測位システム104により実行される。装置105は、測位システム104とは別個で、それと通信しているように示されているが、1つ以上の例において、装置105は測位システムと統合されてもよい。さらに、測位システム104自体が、分散されてもよく、さらに/または1つ以上のロケータ102またはVRコンテンツ捕捉デバイス101と統合されてもよい。
装置105は、メモリ106、プロセッサ107、入力108、および出力109を備える。本実施形態では、1つのプロセッサおよび1つのメモリしか示されていないが、当然のことながら他の実施形態は、2つ以上のプロセッサおよび/または2つ以上のメモリ(例えば同じまたは異なるプロセッサ/メモリタイプ)を利用してもよい。
本実施形態において、装置105は、測位システムの特定用途向け集積回路(ASIC:Application Specific Integrated Circuit)である。他の実施形態において、装置105は、そのようなデバイスのモジュールとすることができ、またはデバイス自体とすることもでき、そこでは、プロセッサ107は、デバイスの汎用CPUであり、メモリ106は、デバイスが備える汎用メモリである。
入力108は、カメラまたはそれに関係する装置からの視覚画像を処理するために、ロケータ102、測位システム104、VRコンテンツ捕捉デバイス101、視覚分析装置(図示せず)などのさらなるコンポーネントから装置105へのシグナリングを受信できるようにする。出力109は、装置105内部から、測位システム104または第2の測位システム(図示せず)などのさらなるコンポーネントへと、シグナリングを先へ提供することを可能にする。本実施形態において、入力108および出力109は、装置105のさらなるコンポーネントへの接続を可能にする接続バスの一部である。
プロセッサ107は、メモリ106上にコンピュータプログラムコードの形態で記憶された命令に従って、入力108を介して受信された情報を実行/処理する専用の汎用プロセッサである。プロセッサ107からそのような動作により生成される出力シグナリングは、出力109を介してその先のさらなるコンポーネントに提供される。
メモリ106(必ずしも単一のメモリユニットとは限らない)は、コンピュータプログラムコードを記憶するコンピュータ可読媒体(本例ではソリッドステートメモリであるが、ハードドライブ、ROM、RAM、フラッシュ、または同様のものなどの他のタイプのメモリであってもよい)である。このコンピュータプログラムコードは、プログラムコードがプロセッサ107上で実行されるとプロセッサ107により実行可能な命令を格納する。メモリ106とプロセッサ107との内部接続は、1つ以上の例示の実施形態において、プロセッサ107とメモリ106とのアクティブな結合を提供してプロセッサ107がメモリ106に記憶されたコンピュータプログラムコードにアクセスできるようにするものと理解することができる。
本例では、個々のコンポーネント間の電気通信を可能にするために、入力108、出力109、プロセッサ107、およびメモリ106はすべて、内部で相互に電気的に接続されている。本例では、ASICとしてともに構成されるように、言い換えれば電子デバイスに設置可能な単一のチップ/回路としてともに統合されるように、コンポーネントはすべて相互に近接して位置する。他の例では、コンポーネントの1つ以上または全部が相互に別々に位置してもよい。
装置105は、タグ103が実質的にロケータ102に面するように物体100が向いているか否かを少なくとも判断し、それによって、物体へ向かう方向を判断するためのワイヤレス信号の実用性を少なくとも判断することにおいて測位システム104の制御を提供するよう構成され、タグ103が実質的にロケータ102に面することは、ワイヤレス信号の実用性を示す。当然のことながら、タグが取り付けられている物体から離れる方に面するタグの側面が、実質的にロケータ102に面していれば、タグ103はロケータに面している。当然のことながら、ロケータの感度、タグの送信機の指向性、およびワイヤレス信号強度のすべてが、ロケータにより受信される信号の実用性に影響を及ぼし得る。したがって、実用性のあるワイヤレス信号を提供するために、或るタイプのタグは、ロケータに実質的にまっすぐ面することを要求されるかもしれないが、他のタグは、実用性のある信号を提供するには、物体に対してロケータと同じ側にある(例えば物体自体によって妨害されないなど)という意味でロケータに面する必要があると判断される可能性がある。よって、装置は、ロケータにまっすぐ面する角度閾値などの所定の閾値以内で、タグ103がロケータ102にまっすぐ面するように物体が向いているか否かを判断するよう構成されてもよい。
装置105は、前記判断を、物体100が存在する空間の視覚画像を捕捉するVRコンテンツ捕捉デバイス101により観測された物体100の向きを備える物体向き情報に基づかせるよう構成されてもよい。1つ以上の例において、VRコンテンツを捕捉するカメラとは別個のカメラが使用されてもよい。さらに判断は、タグ103が取り付けられている物体100上のポジションを備える所定のタグポジション情報に基づく。したがって、装置105に、物体の画像またはモデルと、タグがどこに位置するかの指示とを備える、タグポジション情報が提供されてもよい。1つ以上の例において、タグポジション情報は、物体が人物であると特定され、タグのポジションがその人物の正面、背面などに取り付けられていると特定されるようなものであってもよい。タグポジション情報は、その人物に特有であってもよく、または人物を含む任意の物体に普遍的であってもよい。当然のことながら、タグポジション情報は多数の異なる形態をとり得るが、物体上のどこにタグが取り付けられているかの判断を提供すべきである。1つ以上の例において、装置105/測位システム104のユーザは、人物として特定されるいかなる物体もタグをその正面に有すると指定することができてもよい。あるいは、特定の物体上のどこにタグが位置するかを指定するために、顔認識またはタグの固有識別子が使用されてもよい。例えば、固有識別子「12345」をもつタグは、測位システムに(例えば顔認識パラメータを用いて)特定された人物または特定の人物の正面に位置し、固有識別子「54321」をもつタグは、人物の背面にある。1つ以上の例において、さらに詳しく後述されるタグポジション情報を生成するために、較正手順が実行される。
装置105は、物体を視覚的に特定できタグポジション情報を決定できる、較正モードを有してもよい。1つ以上の例において、較正モードに入るために、カメラ101に見えるようにされるジェスチャが使用されるが、その他任意のユーザ入力が、前記較正モードに入るために使用され得る。カメラ101により観測可能な空間内の各人物は、自分の体のタグが位置するポジションを指さしてもよい。この指さしジェスチャが、装置105または装置105と通信している視覚分析装置(図示せず)により認識されてもよい。よって、これにより、測位システム104および/または装置105は、タグから受信されるワイヤレス信号を、この人物により指さされたポジションに相関させることができる。装置は、顔認識、姿勢、歩行分析、またはその他任意の方法から人物を特定するために、詳細を捕捉することもできる。こうして、タグのワイヤレス信号の固有識別子、タグを装着している物体のアイデンティティ、および人物のどこにタグが位置するか、の間のリンクが確立されてもよい。タグの位置を示す指さしジェスチャを、他の物体または他の人々を指さすために使用することができる。例えば、或る人物が、自分の背面に位置するタグを指さすのは難しいかもしれない。したがって、他の人物が、別の人物のタグに対して指さしジェスチャを実行してもよい。人物の一般的な外形は装置に既知であり、その人物特有のモデルがなくても視覚画像から向きを確認できるかもしれないが、複数の人物および/または物体に関する1つ以上の例では、物体をカメラ101に提示することが必要かもしれない。したがって、未知の外形の物体の場合、装置は、物体の形状またはその外観の、異なる複数の観測角度からの特徴付けを提供してもよい。これは、装置105が後から物体の向きの判断を提供するために物体の外形を認識できるよう、物体をカメラ101に提示して回転させることによって実現されてもよい。
図1は、顔がカメラ101に見えるようにカメラに面している人物100を示す。図2は、カメラから離れる方に面していて、したがって顔がカメラ101に見えない、別の時点の同じ人物100を示す。図2では、タグ103が人物の正面に装備され、したがって、人物100の体がタグとロケータ102との間にあることを示すために、タグ103は破線で示されている。装置105および測位システム104は図1についてのみ示されており、簡潔さのためにすべての図面には示されていないことが分かるであろう。図1では、タグ103からのワイヤレス信号は、タグ103とロケータ102との間に途切れのない見通し線があるので、ロケータ102に対し強いワイヤレス信号を提供できる。したがって、測位ロケータ102は、実用性のあるワイヤレス信号を受信でき、測位システム104は、許容可能な程度の精度で物体100へ向かう方向を判断できる。図2では、人物100の体が、ワイヤレス信号を減衰させるか、またはロケータ102がワイヤレス信号をその反射と区別するのを難しくする可能性があり、測位システム104による物体/人物100へ向かう方向の判断に誤りが生じやすくなるかもしれない。
装置105は、タグ103が実質的にロケータ102に面するように物体100が向いているか否かの判断を少なくとも提供するために、カメラ101から獲得される情報の使用を規定してもよい。1つ以上の例において、物体の向きを判断するための視覚画像の分析が、向き情報を装置105にレポートできる視覚分析装置(図示せず)により実行されてもよく、または装置105がこの分析を実行してもよい。したがって、装置105は、タグポジション情報との比較によってカメラ101の画像から物体100の向きが判断されることを提供してもよい。次に装置105は、所定の精度以内で物体100への方向を正確に判断するためのワイヤレス信号の実用性を推測してもよい。この例では、装置105は、ワイヤレス信号の判断された推定実用性に基づいて測位システム104の制御を提供するよう構成される。実用性(または推定実用性)は、タグ103が実質的にロケータ102に面しているか否かに基づいて推測されてもよい。
図1および図2の例では、装置104は、タグが実質的にロケータに面するように物体が向いているか否かを少なくとも判断することを、顔認識技術を使用して提供するよう構成される。図1では、人物100の顔の周りにボックス111が配置されて、視覚画像のうちこのエリアが顔として特定されたことを示すことが分かる。したがって、装置104は、少なくとも顔認識により判断された物体向き情報を使用してもよい。要するに、装置104またはそれと通信している装置が、カメラ101から視覚画像を受信して、画像の中の人物の顔の存在を特定してもよい。顔が検出されれば、図1に示されるように、物体の向きが「カメラ101に面している」と判断されてもよい。タグポジション情報が、タグ103が人物100の正面に取り付けられていることを示せば、装置105は、タグ103がロケータ102の視界にあり(すなわち実質的にロケータに面し)、タグ103からロケータ102により受信されるワイヤレス信号が物体100へ向かう方向を判断するために実用性があると判断してもよい。図2を参照する。顔が検出されなければ、図2に示されるように、物体の向きが「カメラ101から離れる方に面している」と判断されてもよい。タグポジション情報が、タグ103が人物100の正面に取り付けられていることを示せば、装置105は、タグ103がロケータ102の視界になく(すなわち実質的にロケータに面しておらず)、タグ103からロケータ102により受信されるワイヤレス信号の実用性は疑わしいかもしれないと判断してもよい。したがって、物体100が図2にあるような向きのとき、ワイヤレス信号を使用すれば、測位システム104は不正確な結果を生成するかもしれないと推測されてもよい。よって、装置105は、方向を判断しないように測位システムを制御してもよいし、さらに/または物体100へ向かう方向を判断する他の手段の使用を規定してもよい。例えば、少なくとも装置105がワイヤレス信号に実用性があると判断するまで、位置の判断には、カメラ101画像からの視覚追跡を使用する別の測位システム(図示せず)が使用されてもよい。
よって、ワイヤレス信号の実用性が疑わしいと考えられる場合にとる可能性のあるアクションとして、以下のうちの1つ以上が考えられる:
(a)別のロケータ(図示せず)により受信されたワイヤレス信号を使用する、
(b)より多くの数のロケータ(図示せず)により受信されたワイヤレス信号を使用する、
(c)視覚追跡など、別の方向および/またはポジション判断技術を使用する、
(d)方向判断の精度を高めるために、ロケータ102により受信されたワイヤレス信号に実用性があるとみなされた場合に使用されるのと比べ、強化されたワイヤレス信号の処理技術を使用する。
(a)別のロケータ(図示せず)により受信されたワイヤレス信号を使用する、
(b)より多くの数のロケータ(図示せず)により受信されたワイヤレス信号を使用する、
(c)視覚追跡など、別の方向および/またはポジション判断技術を使用する、
(d)方向判断の精度を高めるために、ロケータ102により受信されたワイヤレス信号に実用性があるとみなされた場合に使用されるのと比べ、強化されたワイヤレス信号の処理技術を使用する。
よって、測位システムは、ワイヤレス信号に実用性があると判断された場合には第1のサンプリングレートおよび/または処理レートを、ワイヤレス信号の実用性が疑わしいと判断された場合には第2の、より高いサンプリングレートおよび/または処理レートを使用してもよい。これにより、許容可能なレベルの精度を維持できるかもしれない。
1つ以上の例において、タグポジション情報は、タグが取り付けられている人物の側面(すなわち正面、背面、左側、右側)を示してもよい。測位システムは、タグ103からワイヤレス信号を受信してもよい。次に測位システムは、明確にするために「方向候補」と呼ばれる、物体100へ向かう方向であると思われる方向を判断してもよい。次に、装置105またはカメラ101からの画像の視覚分析を実行する装置は、方向候補を使用して視覚画像の一部分(例えば視覚画像の全面積未満)を分析してもよい。視覚分析が、「方向候補」周辺の視覚画像の一部分に人物を特定し、且つ物体の向きおよびタグポジション情報がタグ103がロケータ101の視界にあることを示せば、「方向候補」は、物体へ向かう方向として確認されてもよい。次にこの方向が物体追跡、スペーシャルオーディオレンダリング、または他の目的で使用されてもよい。他方、物体の向きおよびタグポジション情報が、タグ103がロケータ101の視界にないことを示せば、方向候補を判断するために使用されたワイヤレス信号は実用性がないと判断されてもよく、方向候補は物体100へ向かう方向としては無視されてもよい。
1つ以上の例において、タグポジション情報は、タグが取り付けられている人物の側面(すなわち正面、背面、左側、右側)、ならびに物体の視覚的特定を可能にする情報を示してもよい。測位システム104は、タグ103からワイヤレス信号を受信してもよく、これはタグの固有識別子を含んでもよい。固有識別子は、装置105が(それ自体でまたは別の装置を用いて)、タグ103が関連する物体100を視覚的に判断できるようにしてもよい。測位システム104は、明確にするために「方向候補」と呼ばれる、物体100へ向かう方向であると思われる方向を判断してもよい。物体の外観が既知であると仮定すると、装置105またはカメラ101からの画像の視覚分析を実行する装置は、画像の中の物体100を特定して、物体の向きを判断してもよい(方向候補を使用して視覚画像の一部分を分析してもよく、そうしなくてもよい)。それに応じて、ワイヤレス信号の実用性が推測されてもよく、その結果、方向候補が物体へ向かう方向として確認され、または無視されてもよい。本例において、物体の外観が既知であると仮定すると、物体へ向かう方向は視覚分析から判断され得る。よって、ワイヤレス信号の実用性が疑わしいような物体100の向きであっても、視覚分析でさらに物体が特定される場合、測位システム104によってワイヤレス信号から判断される方向と、視覚分析から判断される方向との組み合わせが、物体100へ向かう方向を判断するために結合されてもよい。1つ以上の例において、視覚的に判断された方向のみが、物体100へ向かう方向であると判断されてもよい。ワイヤレス信号に実用性があると判断されれば、物体へ向かう方向の判断にはワイヤレス信号のみが使用されてもよい(すなわち、視覚的に判断された方向は使用しない)。
本願明細書の例において、ロケータ102およびカメラ101は同一場所に設置されているが、1つ以上の他の例では、同一場所に設置されていなくてもよい。カメラに対するロケータ102のポジションが分かっていれば、ビデオ画像の視覚分析を実行してロケータに対する物体の向きを考慮することができる。
上述のとおり、1つ以上の例において、タグが実質的にロケータ102に面するように物体が向いているか否かの判断は、視覚画像の顔認識を使用して実行される。1つ以上の例において、タグが実質的にロケータ102に面するように物体が向いているか否かの判断は、体位分析により実行されてもよい。したがって、人物を含む場合の物体の向きは、顔認識に加えて、または顔認識とは独立して、視覚画像の中の人物100の姿勢を分析することにより実行されてもよい。体位分析の使用は、有利かもしれない。例えば、顔認識技術のみを使用する場合、ロケータ102に体が面している(タグ103がその胸に取り付けられている)が頭を横に向けている人物は、ロケータ102に面していると認識されないかもしれず、その結果、ワイヤレス信号の実用性は、測位のための実用性なしとみなされるかもしれない。しかしながら、反対に、現実にはタグ103はロケータ102に面していて、信号には測位のための実用性があるかもしれない。体位が考慮される場合、ワイヤレス信号の実用性を判断するために、タグ103が位置する体の部分が斟酌され得る。
したがって、装置105には、タグが実質的にロケータ102に面するように物体が向いているか否かを少なくとも判断することを、以下のうちの1つ以上に基づいて提供させてもよい。
物体が人物であれば、
i)顔検出、
ii)姿勢検出、
iii)全身の向きの検出、
さらに、物体全般について、
iv)タグが位置する物体に関する所定の物体外形情報に基づく。
物体が人物であれば、
i)顔検出、
ii)姿勢検出、
iii)全身の向きの検出、
さらに、物体全般について、
iv)タグが位置する物体に関する所定の物体外形情報に基づく。
物体外形情報は、異なる観測方向からの物体の画像、または物体の3次元モデルもしくはそれを示すデータを備えてもよい。
図3および図4は、2つの測位タグ301、302が取り付けられた人物100を示す。第1のタグ301は、人物の正面(その胸)に取り付けられ、第2のタグ302は、人物の背面に取り付けられている。ロケータ102は、第1のタグ301から受信されるワイヤレス信号と、第2のタグ302から受信されるワイヤレス信号とを区別するよう構成されてもよい。例えば、信号の形態が異なってもよいし、またはワイヤレス信号が固有識別子を含んでもよい。本例では、各タグ301、302は、ワイヤレス信号にエンコードされる固有識別子を含む。
前の例にあるように、物体向き情報は、ロケータ102に面する人物の「側面」(または、カメラに対する向きであって、その向きから、カメラに対するロケータの位置に関する情報に基づいて、ロケータに対する物体の向きを判断することができるもの)を提供してもよい。所定のタグポジション情報が、第1のタグ301が人物の前側に取り付けられ、第2のタグ302が人物100の背面に取り付けられていることを示してもよい。それに応じて、装置104には、第1のタグ301が実質的にロケータ102に面するように物体100が向いているか否か、および第2のタグ302が実質的にロケータ102に面するか否かの判断を少なくとも提供させてもよい。装置は、第1のタグ301または第2のタグ302のどちらのタグが、物体100の方向を判断するための実用性がより高いワイヤレス信号を提供し得るかの選択を提供してもよい。図3において、第1のタグ301は、実質的にロケータ102に面してワイヤレス信号の実用性を示し、第2のタグ302は、遮蔽されている。図4では、第2のタグ302が、実質的にロケータ102に面してそのワイヤレス信号の実用性を示し、第1のタグ301は、遮蔽されている。よって、本例では、装置105に、第1のタグ301および第2のタグ302のどちらが実質的にロケータ102に面するかの判断を提供させ、それによって、第1のタグからのワイヤレス信号と第2のタグからのワイヤレス信号とのどちらが物体100のポジションを位置特定するためにより高い実用性があり得るかの判断において測位システム104の制御を提供させる。要するに、図3に示された人物100の向きでは、装置105は第1のタグ301を選択してもよく、図4に示された人物100の向きでは、装置105は第2のタグ302を選択してもよい。測位システム104は、人物100へ向かう方向を判断する際に、選択されたタグから受信されたワイヤレス信号を、他方よりも優先的に使用するよう制御されてもよい。
図5および図6は、異なる2つの向きの人物100を示し、図5は、カメラ101およびロケータ102に面する人物を示し、図6は、カメラ101およびロケータ102から離れる方に面する人物を示す。1つ以上の例において、図3および図4に示されるのと同様に、物体100には、ロケータ102により受信されるワイヤレス信号をそれぞれが放出できる複数のタグが取り付けられていてもよい。図5および図6は、測位タグのベルト500を装着した人物100を示し、図5では第1から第5のタグ501〜505を見ることができ、図6では第6から第10のタグ506〜510を見ることができる。
本例では、装置105に、人物100の体の向き、またはより一般的に物体の向きの判断を提供させてもよい。人物100に対する各タグ501〜510のポジションを備えるタグポジション情報を使用して、装置は、複数のタグのうち、どの単一のタグまたはタグのサブセットが、測位システム104による方向判断のために最も実用性の高いワイヤレス信号を提供する(可能性がある)かを判断してもよい。次に、装置105は、実用性がある、または最も実用性が高いとみなされたタグからのワイヤレス信号を、物体100に取り付けられた残りのタグに優先して使用するように、測位システム104を制御してもよい。
当然のことながら、上記の例では、ロケータ102に面するタグが、そのワイヤレス信号がロケータ102に到達するまでに最小の妨害を有する(または他のロケータよりも妨害が小さい)と思われることにより、実用性のあるワイヤレス信号を提供すると考えられてもよい。上記の実施形態において、排他的ではないが特に、単一のタグまたは物体の周りにまばらに分散した複数のタグが使用される場合、特定のタグがロケータに面するとみなされ得るのは、特定のタグが以下のうちの1つ以上に該当するように物体が向いている場合である:
(a)ロケータ102から見える、
(b)物体100により妨害されない、
(c)物体の閾値回転角以内でロケータにまっすぐ面している、
(d)ロケータ102にまっすぐ面している、
(e)さらなる物体により妨害されていない。
(a)ロケータ102から見える、
(b)物体100により妨害されない、
(c)物体の閾値回転角以内でロケータにまっすぐ面している、
(d)ロケータ102にまっすぐ面している、
(e)さらなる物体により妨害されていない。
図7および図8は、第1の人物700および第2の人物701を含む2つの物体を示す。第1の人物700には第1の測位タグ702が取り付けられており、第2の人物701には第2の測位タグ703が取り付けられている。
図7では、第1の人物700および第2の人物701が、各人物700、701が他方の人物のタグを遮蔽しないように、互いに対して位置している。さらに、第1の人物700および第2の人物701のいずれも、ロケータ102に第1のタグ702および第2のタグ703が見えるように向いている。よって、第1のタグ702からのワイヤレス信号および第2のタグ703からのワイヤレス信号は、実用性があると装置105によりみなされてもよく、人物700、701への方向の判断のために測位システム104により使用されてもよい。
図8において、第2の人物701は、第1の人物700の前に回り込み、ロケータ102の視界から第1のタグ702を遮蔽した。よって、第2のタグ703からのワイヤレス信号は第2の人物701へ向かう方向を判断するために実用性があるかもしれないが、第1のタグ702からのワイヤレス信号は誤りが生じやすいかもしれない。
1つ以上の例において、装置105には、タグ702が遮蔽されているか否かの判断を提供させてもよい。要するに、装置105にはさらに、物体700が存在する空間の視覚画像を捕捉しているカメラ101で観測して、物体が遮蔽されているか否かの判断を、物体遮蔽情報に基づいて提供させてもよい。よって、装置はその結果、タグがロケータに実質的に面するように物体が向いているか否か、および物体が別の物体により遮蔽されているか否かに基づいて、測位システムの制御を提供してもよい。タグがロケータに面し、他の物体により遮蔽されていないような向きになっている物体は、ワイヤレス信号の実用性を示す。装置105は、カメラ101からの画像の視覚分析を提供し、それによって物体遮蔽情報を生成してもよく、または装置105は、画像の視覚分析を実行して物体の遮蔽ステータスを判断し結果を物体遮蔽情報として装置105に提供するさらなる装置(図示せず)から、物体遮蔽情報を受信してもよい。
上述のとおり、測位システムの制御は、様々なアクションの実行を提供し得る。後述されるように、当該のアクションに加えて、またはそれとは独立して、問題の物体を遮蔽するさらなる物体がそれ自体タグを有していれば、さらなる物体のタグが測位システム104により使用されて、さらなる物体と問題の物体との両方へ向かう方向が判断されてもよい。
1つ以上の例において、装置105には、第1の物体700が第2の物体701により遮蔽されているとの判断に基づき、第1の物体700への方向の判断を提供するために第2の物体701からのワイヤレス信号を使用するように測位システムの制御を提供させてもよく、ここで、第1の物体700および第2の物体701のいずれにもタグが取り付けられている。要するに、物体遮蔽情報が、第1の物体700が遮蔽されていることを示してもよく、その結果、第1のタグ702からのワイヤレス信号の実用性が疑わしいとみなされてもよい。装置105は、カメラ101からの画像を使用して第2の物体701の特定を提供してもよく、第2の物体701の視覚的特定に基づいて、どのタグが第2の(遮蔽している)物体701に取り付けられているかの判断を、タグポジション情報を使用して提供してもよい。次に、測位システムの制御は、第1の(遮蔽された)物体700へ向かう方向を判断する際、第2の(遮蔽している)物体のタグからのワイヤレス信号を使用することを規定してもよい。当然のことながら、記載された測位システムの制御は、第2の物体701のタグ703がロケータ102に面するように第2の物体701が向いていることに依存してもよい。
別の可能性を補足すべきかもしれない。この種の妨害状況において、第2の物体701がカメラに非常に近く、第1の物体がかなり遠いということがあり得る。その場合、タグ703の情報をそのように使用するのはあまり合理的でない。
排他的ではないが、タグへ向かう方向のみでなくタグのポジションが判断される例などの1つ以上の例において、遮蔽される物体と遮蔽する物体との間の距離が考慮されてもよい。第1および第2の物体700、701が互いに近い(閾値よりも近い)場合、第2の物体701のタグのポジションが第1の物体の測位に使用されてもよい。なお、第1の物体700が第2の物体701からさらに(閾値距離よりも)離れている場合(または第1および第2の物体間の距離にかかわらずすべての場合)、他の技術が使用されてもよい。例えば、第1の物体700が第2の物体701により遮蔽されていれば、第2の物体701のタグ703の方向情報が使用されてもよいが、第1の物体700の距離を特定するために他の方法が使用されてもよい。例えば、第1の物体700の位置の履歴情報が使用されて、現在の距離の推定が求められてもよい。距離の変化を求めるために、推定は、次のうちの1つ以上に基づいてもよい。遮蔽される前の第1の物体の移動の方向および/もしくは速度、したがって、距離の推定は、物体が同じ進路に残ることを想定して判断することができる、または、第1の物体が遮蔽されていなかったときに対する、第1の物体のうち見える部分の、視覚画像中での相対的な大きさ。
図9は、901、物体が存在する空間の視覚画像を捕捉するカメラにより観測された物体の向きを備える物体向き情報と、タグが取り付けられている物体上のポジションを備える所定のタグポジション情報とに基づいて、902、タグが実質的にロケータに面するように物体が向いているか否かの判断を少なくとも提供し、それによって、物体へ向かう方向を判断するためのワイヤレス信号の実用性を少なくとも判断することにおいて測位システムの制御を提供し、タグが実質的にロケータに面していることは、ワイヤレス信号の実用性を示す、各ステップを示すフロー図を示す。
図10は、一例によるプログラムを提供するコンピュータ/プロセッサ可読媒体1000を概略的に示す。本例では、コンピュータ/プロセッサ可読媒体は、デジタル多用途ディスク(DVD:digital versatile disc)またはコンパクトディスク(CD:compact disc)などのディスクである。他の例では、コンピュータ可読媒体は、発明の機能を実行するような形でプログラムされた任意の媒体であってもよい。コンピュータプログラムコードは、同じタイプの複数のメモリ間、またはROM、RAM、フラッシュ、ハードディスク、ソリッドステートなど異なるタイプの複数のメモリ間に分散されてもよい。
上記の例で示された装置は、携帯可能な電子デバイス、ラップトップコンピュータ、移動電話、スマートフォン、タブレットコンピュータ、携帯情報端末、デジタルカメラ、スマートウォッチ、スマートアイウェア、ペンベースのコンピュータ、携帯可能でない電子デバイス、デスクトップコンピュータ、モニタ、家庭用電化製品、スマートTV、サーバ、ウェアラブルデバイス、またはそれらの1つ以上のモジュール/回路構成としてもよい。
言及された任意の装置/デバイス/サーバ、および/または言及された特定の装置/デバイス/サーバの他の特徴は、有効化、例えばスイッチをオンにされたときなどにのみ所望の動作を実行するよう構成されたものとなるように準備された装置により提供されてもよい。そのような事例では、非有効化時(例えばスイッチオフ状態)では必ずしもアクティブメモリに適切なソフトウェアをロードしていなくてもよく、有効化時(例えばオン状態)にのみ適切なソフトウェアをロードしてもよい。装置は、ハードウェア回路構成および/またはファームウェアを備えてもよい。装置は、メモリ上にロードされたソフトウェアを備えてもよい。そのようなソフトウェア/コンピュータプログラムは、同じメモリ/プロセッサ/機能ユニット上および/または1つ以上のメモリ/プロセッサ/機能ユニット上に記録されてもよい。
一部の例において、言及された特定の装置/デバイス/サーバは、所望の動作を実行するよう適切なソフトウェアを用いて事前にプログラムされてもよく、この適切なソフトウェアは、ユーザが、例えばそのソフトウェアおよびそれに関連する機能性をロック解除/有効化するため「キー」をダウンロードすることにより使用可能にされてもよい。そのような例に関連する利点としては、デバイスにさらなる機能性が必要なときにデータをダウンロードする必要性が軽減されることを挙げることができ、これは、ユーザが有効化しないかもしれない機能性のためにそのような事前プログラムされたソフトウェアを記憶するのに十分な容量をデバイスが有することが分かっている例において有用な可能性がある。
言及された任意の装置/回路構成/要素/プロセッサは、言及された機能に加えて他の機能も有してもよく、これらの機能は、同じ装置/回路構成/要素/プロセッサにより実行されてもよい。開示された1つ以上の側面は、関連するコンピュータプログラムおよび適切な保持体(例えばメモリ、信号)に記録されたコンピュータプログラム(ソース/トランスポートエンコードされてもよい)の電子的な配布を含んでもよい。
本願明細書に記載された任意の「コンピュータ」は、同じ回路基板に、または回路基板の同じ領域/ポジションに、または同じデバイスにも位置してもしなくてもよい、1つ以上の個々のプロセッサ/処理要素の集合を備えることができる。一部の例では、言及された任意のプロセッサの1つ以上が複数のデバイスにわたって分散されてもよい。同じまたは異なるプロセッサ/処理要素が、本願明細書に記載された1つ以上の機能を実行してもよい。
「シグナリング」という用語は、送信および/または受信される一連の電気/光信号として送信される1つ以上の信号を指してもよい。一連の信号は、前記シグナリングを構成する、1、2、3、4または5以上もの個別の信号成分または別個の信号を備えてもよい。これらの個別の信号の一部または全部は、無線または有線通信により同時に、順次に、および/または互いに時間的に重なるように送信/受信されてもよい。
言及された任意のコンピュータおよび/またはプロセッサおよびメモリ(例えばROM、CD−ROMなどを含む)の任意の説明に関して、これらは、コンピュータプロセッサ、特定用途向け集積回路(ASIC)、フィールドプログラマブルゲートアレイ(FPGA:field−programmable gate array)、および/または本発明の機能を実行するような形にプログラムされた他のハードウェアコンポーネントを備えてもよい。
出願人は、ここに、本願明細書に記載された個々の特徴それぞれを単独で開示し、さらにかかる特徴2つ以上の任意の組み合わせを開示する。この開示は、当業者の一般知識を踏まえて、かかる特徴または組み合わせが本明細書に基づき全体として実行可能となる程度まで行われており、これは、かかる特徴または特徴の組み合わせが本願明細書に開示された任意の問題を解決するかどうかにはかかわらず、クレームの範囲を限定することもない。出願人は、開示された側面/例がそのような任意の個々の特徴からなっても、または特徴の組み合わせからなってもよいことを指摘する。当業者には当然のことながら、上記の説明に鑑みて、本開示の範囲内で様々な変更が加えられ得る。
基本となる新奇な特徴が、その例に適用されて示され、記載され、指摘されたが、当然のことながら、記載されたデバイスおよび方法の形態および細部における様々な省略および置換および変更が、本開示の範囲から逸脱することなく、当業者によって行われることが可能である。例えば、同じ結果を達成するために実質的に同じ機能を実質的に同じ形で実行する当該要素および/または方法ステップのすべての組み合わせが、本開示の範囲内であることが明示的に意図される。さらに、当然のことながら、開示された任意の形態または例に関連して示されかつ/または記載された構造および/または要素および/または方法ステップは、一般的な設計上の選択事項として、他の任意の開示または記載または示唆された形態または例に組み込まれてもよい。さらに、特許請求の範囲では、ミーンズ・プラス・ファンクション節は、列挙された機能を実行するものとして本願明細書に記載された構造、さらに構造上の等価物のみならず、等価な構造も対象とすることを意図される。要するに、釘とねじとは、木製部品を留めるという状況において、釘が円柱状の表面を用いて木製部品同士を固定するのに対し、ねじはらせん状の表面を用いるという点で構造上の等価物ではないかもしれないが、釘とねじとは等価な構造体ではあり得る。
Claims (15)
- 少なくとも1つのプロセッサと、
コンピュータプログラムコードを含む少なくとも1つのメモリと、
を備える装置であって、前記コンピュータプログラムコードは、前記少なくとも1つのプロセッサに実行されると、前記装置に少なくとも以下のこと:
空間内の物体へ向かう方向の判断であって、前記物体は、測位システムの少なくとも1つのロケータによる受信のためにワイヤレス信号を放出でき前記物体に取り付けられた測位タグを有し、前記測位システムは、前記ワイヤレス信号に基づいて前記測位タグへ向かう方向を、さらにその結果として前記物体の前記方向を判断するよう構成され、前記物体は、前記空間を自由に動き回ることができる、前記方向の判断に関して、
前記物体が存在している前記空間の視覚画像を捕捉しているカメラにより観測された前記物体の前記向きを備える物体向き情報と、前記物体上の前記測位タグが取り付けられているポジションを備える所定のタグポジション情報とに基づいて、
前記測位タグが実質的に前記ロケータに面するように前記物体が向いているか否かの判断を少なくとも提供することであって、それによって、前記物体へ向かう前記方向を判断するための前記ワイヤレス信号の実用性を少なくとも判断することにおいて前記測位システムの制御を提供するべく、前記判断を提供することであって、前記測位タグが実質的に前記ロケータに面していることは、前記ワイヤレス信号の前記実用性を示す、前記判断を提供すること、
を遂行させるよう構成される、装置。 - 前記タグが実質的に前記ロケータから離れる方に面するように前記物体が向いており、その結果として、前記測位システムによる前記方向の判断において使用するための実用性が前記タグからの前記ワイヤレス信号にないという判断に基づいて、前記ワイヤレス信号を使用する手段以外の手段によって前記物体へ向かう前記方向の判断を提供する、請求項1に記載の装置。
- 前記物体は、人物を含み、前記タグが実質的に前記ロケータに面するように前記物体が向いているか否かを少なくとも判断することは、
iv)顔検出、
v)体の向きの検出、
vi)骨格モーション追跡
のうちの1つ以上に基づく、請求項1または2に記載の装置。 - 前記物体に、少なくとも第1のタグおよび第2のタグを備える2つ以上のタグが提供され、前記第1および第2のタグは、前記物体上の別々のポジションに取り付けられ、前記所定のタグポジション情報は、前記第1のタグが取り付けられている前記物体上の前記ポジションおよび前記第2のタグが取り付けられている前記物体上の前記ポジションを備え、前記装置には、前記第1のタグおよび前記第2のタグのどちらが実質的に前記ロケータに面するかの判断を提供することであって、それによって、前記第1のタグからの前記ワイヤレス信号および前記第2のタグからの前記ワイヤレス信号のうちどちらに前記物体の前記ポジションを位置特定するための実用性があるかの判断において前記測位システムの制御を提供するべく、前記判断を前記提供すること、をさせる、請求項1から3のいずれかに記載の装置。
- 前記第1のタグおよび前記第2のタグは、3つ以上のタグを備えるループの一部を構成し、前記ループは、前記物体の周りに取り付けるよう構成され、前記所定のタグポジション情報は、前記3つ以上のタグそれぞれが取り付けられている前記物体上の前記ポジションを備え、前記装置には、前記3つ以上のタグのうち、前記測位システムによる前記物体へ向かう前記方向の判断において使用するための、実用性のあるワイヤレス信号(単数または複数)を提供する少なくとも1つのタグの判断を提供させる、請求項4に記載の装置。
- 前記装置には、前記物体と前記ロケータとの間の見通し線がさらなる物体により遮蔽されているか否かを判断させ、前記見通し線の存在は、前記物体の前記ポジションを位置特定するための前記ワイヤレス信号の前記実用性を示す、請求項1から5のいずれかに記載の装置。
- 前記さらなる物体に、前記測位システムの前記少なくとも1つのロケータによる受信のためにワイヤレス信号を放出でき前記さらなる物体に取り付けられたさらなるタグが提供され、前記物体と前記ロケータとの間の前記見通し線が前記さらなる物体により遮蔽されているとの判断に基づいて、前記物体が前記さらなる物体により遮蔽されている間は少なくとも、前記測位システムにより、前記さらなるタグの前記位置を使用して前記物体の前記位置の判断を提供する、請求項6に記載の装置。
- 前記カメラおよび前記ロケータは同一場所に設置されている、請求項1から7のいずれかに記載の装置。
- 前記カメラおよび前記ロケータは同一場所に設置されておらず、前記カメラに対する前記ロケータの前記位置が前記装置に提供され、前記装置には、前記視覚画像に基づいて、前記ロケータの視点からの前記物体の前記向きの判断を提供させる、請求項1から8のいずれかに記載の装置。
- 前記カメラは、仮想現実コンテンツ捕捉カメラを備える、請求項1から9のいずれかに記載の装置。
- 前記装置には、前記物体へ向かう前記方向を判断する前に、較正段階を提供させ、前記較正段階は、前記カメラからの視覚画像と、前記物体に取り付けられたタグの前記位置を特定し前記カメラに提示される所定のジェスチャとに基づいて、前記所定のタグポジション情報の生成を提供することを少なくとも含む、請求項1から10のいずれかに記載の装置。
- 前記装置には、前記物体から受信されるオーディオと、前記測位システムにより判断される前記物体の前記位置とを使用して、スペーシャルオーディオミキシングを提供させる、請求項1から11のいずれかに記載の装置。
- カメラと測位システムとを備える仮想現実コンテンツ捕捉装置であって、前記測位システムは、少なくとも1つのロケータおよび少なくとも1つのタグを備え、前記測位システムは、空間内の物体の位置を判断するよう構成され、前記タグは、前記物体に取り付けられて、前記測位システムの前記少なくとも1つのロケータによる受信のためにワイヤレス信号を放出できるよう構成され、前記測位システムは、前記ワイヤレス信号に基づいて前記タグの位置、さらにその結果として前記物体の前記位置を判断するよう構成され、前記物体は、前記空間を自由に動き回ることができ、前記測位システムは、請求項1から12のいずれかに記載の前記装置を含む、仮想現実コンテンツ捕捉装置。
- 空間内の物体へ向かう方向の判断であって、前記物体は、測位システムの少なくとも1つのロケータによる受信のためにワイヤレス信号を放出でき前記物体に取り付けられたタグを有し、前記測位システムは、前記ワイヤレス信号に基づいて前記タグへ向かう方向を、さらにその結果として前記物体の前記方向を判断するよう構成され、前記物体は、前記空間を自由に動き回ることができる、前記方向の判断に関して、
前記物体が存在している前記空間の視覚画像を捕捉しているカメラにより観測された前記物体の前記向きを備える物体向き情報と、前記物体上の前記タグが取り付けられているポジションを備える所定のタグポジション情報とに基づいて、
前記タグが実質的に前記ロケータに面するように前記物体が向いているか否かの判断を少なくとも提供することであって、それによって、前記物体へ向かう前記方向を判断するための前記ワイヤレス信号の実用性を少なくとも判断することにおいて前記測位システムの制御を提供するべく、前記判断を提供することであって、前記タグが実質的に前記ロケータに面していることは、前記ワイヤレス信号の前記実用性を示す、前記判断を提供すること、
を含む方法。 - 装置の少なくとも1つのプロセッサ上で実行されると少なくとも以下のこと:
空間内の物体へ向かう方向の判断であって、前記物体は、測位システムの少なくとも1つのロケータによる受信のためにワイヤレス信号を放出でき前記物体に取り付けられたタグを有し、前記測位システムは、前記ワイヤレス信号に基づいて前記タグへ向かう方向を、さらにその結果として前記物体の前記方向を判断するよう構成され、前記物体は、前記空間を自由に動き回ることができる、前記方向の判断に関して、
前記物体が存在している前記空間の視覚画像を捕捉しているカメラにより観測された前記物体の前記向きを備える物体向き情報と、前記物体上の前記タグが取り付けられているポジションを備える所定のタグポジション情報とに基づいて、
前記タグが実質的に前記ロケータに面するように前記物体が向いているか否かの判断を少なくとも提供することであって、それによって、前記物体へ向かう前記方向を判断するための前記ワイヤレス信号の実用性を少なくとも判断することにおいて前記測位システムの制御を提供するべく、前記判断を前記提供することであって、前記タグが実質的に前記ロケータに面していることは、前記ワイヤレス信号の前記実用性を示す、前記判断を前記提供すること、
を遂行させるよう構成されるプログラムコードを備える、コンピュータプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP16172675.7A EP3252491A1 (en) | 2016-06-02 | 2016-06-02 | An apparatus and associated methods |
EP16172675.7 | 2016-06-02 | ||
PCT/FI2017/050404 WO2017207873A1 (en) | 2016-06-02 | 2017-05-30 | An apparatus and associated methods |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2019522187A true JP2019522187A (ja) | 2019-08-08 |
Family
ID=56203116
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018563019A Pending JP2019522187A (ja) | 2016-06-02 | 2017-05-30 | 装置および関連する方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20200326402A1 (ja) |
EP (1) | EP3252491A1 (ja) |
JP (1) | JP2019522187A (ja) |
KR (1) | KR20190011778A (ja) |
CN (1) | CN109477880A (ja) |
WO (1) | WO2017207873A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2540224A (en) * | 2015-07-08 | 2017-01-11 | Nokia Technologies Oy | Multi-apparatus distributed media capture for playback control |
CN110266940A (zh) * | 2019-05-29 | 2019-09-20 | 昆明理工大学 | 一种人脸-摄像机主动位姿协同的人脸正视图像获取方法 |
GB2587335A (en) * | 2019-09-17 | 2021-03-31 | Nokia Technologies Oy | Direction estimation enhancement for parametric spatial audio capture using broadband estimates |
Citations (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0698400A (ja) * | 1992-07-27 | 1994-04-08 | Yamaha Corp | 音像定位装置 |
JPH1130659A (ja) * | 1997-07-10 | 1999-02-02 | Hitachi Ltd | 移動体の位置決定および追跡装置 |
JP2004023180A (ja) * | 2002-06-12 | 2004-01-22 | Toshiba Corp | 音声伝送装置、音声伝送方法及びプログラム |
JP2004080347A (ja) * | 2002-08-16 | 2004-03-11 | Nippon Telegr & Teleph Corp <Ntt> | 無線タグを用いた被写体識別システム |
JP2004265222A (ja) * | 2003-03-03 | 2004-09-24 | Nippon Telegr & Teleph Corp <Ntt> | インタフェース方法、装置、およびプログラム |
JP2004364044A (ja) * | 2003-06-05 | 2004-12-24 | Sony Corp | 画像記録装置 |
JP2005130465A (ja) * | 2003-09-29 | 2005-05-19 | Fuji Photo Film Co Ltd | 撮像装置、情報蓄積サーバ、及び物品識別装置 |
JP2005520441A (ja) * | 2002-03-12 | 2005-07-07 | メナーチェ エルエルシー | 動作追跡装置とその方法 |
JP2008072543A (ja) * | 2006-09-15 | 2008-03-27 | Fujitsu Ltd | 画像領域へのメタデータ自動付与装置,メタデータ自動付与方法およびメタデータ自動付与プログラム |
JP2009109241A (ja) * | 2007-10-26 | 2009-05-21 | Yamatake Corp | 位置検出システム及び位置検出方法 |
JP2010025738A (ja) * | 2008-07-18 | 2010-02-04 | Yamatake Corp | 位置検出システム及び位置検出方法 |
WO2010041463A1 (ja) * | 2008-10-09 | 2010-04-15 | パナソニック株式会社 | 基地局装置及び測距方法 |
WO2010105633A1 (en) * | 2009-03-16 | 2010-09-23 | Nokia Corporation | Data processing apparatus and associated user interfaces and methods |
JP2010534849A (ja) * | 2007-07-31 | 2010-11-11 | テレ アトラス ベスローテン フエンノートシャップ | 位置を判定する方法及び装置 |
JP2011111247A (ja) * | 2009-11-24 | 2011-06-09 | Hitachi Kokusai Electric Inc | 物体の向き検出システム |
JP2013072858A (ja) * | 2011-09-29 | 2013-04-22 | Panasonic Corp | 移動体位置推定装置、移動体位置推定方法、及び、移動体位置推定プログラム |
WO2013065225A1 (ja) * | 2011-10-31 | 2013-05-10 | パナソニック株式会社 | 位置推定装置、位置推定方法、プログラムおよび集積回路 |
JP2013108933A (ja) * | 2011-11-24 | 2013-06-06 | Kddi Corp | 情報端末装置 |
JP2013164299A (ja) * | 2012-02-09 | 2013-08-22 | Univ Of Tsukuba | 測定装置、測定方法、測定プログラム及び測定システム |
JP2014067269A (ja) * | 2012-09-26 | 2014-04-17 | Denso Corp | 検出装置 |
JP2015170248A (ja) * | 2014-03-10 | 2015-09-28 | 富士ゼロックス株式会社 | 表示制御装置及びプログラム |
JP2017505908A (ja) * | 2013-10-20 | 2017-02-23 | オアフ グループ,リミティド ライアビリティ カンパニー | 物体の動作判定方法及びシステム |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6522296B2 (en) * | 2001-06-25 | 2003-02-18 | Harris Corporation | Method and system for calibrating wireless location systems |
US6580393B2 (en) * | 2001-06-25 | 2003-06-17 | Harris Corporation | System and method for determining the location of a transmitter using passive reflectors or refractors as proxy receivers and using database querying |
US9036865B2 (en) * | 2012-09-12 | 2015-05-19 | International Business Machines Corporation | Location determination for an object using visual data |
JP2014163791A (ja) * | 2013-02-25 | 2014-09-08 | Denso Wave Inc | 無線タグ測位システム |
CN105531998B (zh) * | 2013-08-19 | 2017-07-07 | 诺基亚技术有限公司 | 用于对象检测和分割的方法、装置及计算机程序产品 |
-
2016
- 2016-06-02 EP EP16172675.7A patent/EP3252491A1/en not_active Withdrawn
-
2017
- 2017-05-30 WO PCT/FI2017/050404 patent/WO2017207873A1/en active Application Filing
- 2017-05-30 US US16/305,614 patent/US20200326402A1/en not_active Abandoned
- 2017-05-30 JP JP2018563019A patent/JP2019522187A/ja active Pending
- 2017-05-30 KR KR1020187037725A patent/KR20190011778A/ko not_active Application Discontinuation
- 2017-05-30 CN CN201780043796.0A patent/CN109477880A/zh active Pending
Patent Citations (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0698400A (ja) * | 1992-07-27 | 1994-04-08 | Yamaha Corp | 音像定位装置 |
JPH1130659A (ja) * | 1997-07-10 | 1999-02-02 | Hitachi Ltd | 移動体の位置決定および追跡装置 |
JP2005520441A (ja) * | 2002-03-12 | 2005-07-07 | メナーチェ エルエルシー | 動作追跡装置とその方法 |
JP2004023180A (ja) * | 2002-06-12 | 2004-01-22 | Toshiba Corp | 音声伝送装置、音声伝送方法及びプログラム |
JP2004080347A (ja) * | 2002-08-16 | 2004-03-11 | Nippon Telegr & Teleph Corp <Ntt> | 無線タグを用いた被写体識別システム |
JP2004265222A (ja) * | 2003-03-03 | 2004-09-24 | Nippon Telegr & Teleph Corp <Ntt> | インタフェース方法、装置、およびプログラム |
JP2004364044A (ja) * | 2003-06-05 | 2004-12-24 | Sony Corp | 画像記録装置 |
JP2005130465A (ja) * | 2003-09-29 | 2005-05-19 | Fuji Photo Film Co Ltd | 撮像装置、情報蓄積サーバ、及び物品識別装置 |
JP2008072543A (ja) * | 2006-09-15 | 2008-03-27 | Fujitsu Ltd | 画像領域へのメタデータ自動付与装置,メタデータ自動付与方法およびメタデータ自動付与プログラム |
JP2010534849A (ja) * | 2007-07-31 | 2010-11-11 | テレ アトラス ベスローテン フエンノートシャップ | 位置を判定する方法及び装置 |
JP2009109241A (ja) * | 2007-10-26 | 2009-05-21 | Yamatake Corp | 位置検出システム及び位置検出方法 |
JP2010025738A (ja) * | 2008-07-18 | 2010-02-04 | Yamatake Corp | 位置検出システム及び位置検出方法 |
WO2010041463A1 (ja) * | 2008-10-09 | 2010-04-15 | パナソニック株式会社 | 基地局装置及び測距方法 |
WO2010105633A1 (en) * | 2009-03-16 | 2010-09-23 | Nokia Corporation | Data processing apparatus and associated user interfaces and methods |
JP2011111247A (ja) * | 2009-11-24 | 2011-06-09 | Hitachi Kokusai Electric Inc | 物体の向き検出システム |
JP2013072858A (ja) * | 2011-09-29 | 2013-04-22 | Panasonic Corp | 移動体位置推定装置、移動体位置推定方法、及び、移動体位置推定プログラム |
WO2013065225A1 (ja) * | 2011-10-31 | 2013-05-10 | パナソニック株式会社 | 位置推定装置、位置推定方法、プログラムおよび集積回路 |
JP2013108933A (ja) * | 2011-11-24 | 2013-06-06 | Kddi Corp | 情報端末装置 |
JP2013164299A (ja) * | 2012-02-09 | 2013-08-22 | Univ Of Tsukuba | 測定装置、測定方法、測定プログラム及び測定システム |
JP2014067269A (ja) * | 2012-09-26 | 2014-04-17 | Denso Corp | 検出装置 |
JP2017505908A (ja) * | 2013-10-20 | 2017-02-23 | オアフ グループ,リミティド ライアビリティ カンパニー | 物体の動作判定方法及びシステム |
JP2015170248A (ja) * | 2014-03-10 | 2015-09-28 | 富士ゼロックス株式会社 | 表示制御装置及びプログラム |
Non-Patent Citations (1)
Title |
---|
M. PESCE: ""Nokia's new Ozo VR camera shows the company's future isn't in mobile handsets, It's in face compue", [ONLINE], JPN6020002870, 28 November 2015 (2015-11-28), ISSN: 0004340973 * |
Also Published As
Publication number | Publication date |
---|---|
WO2017207873A1 (en) | 2017-12-07 |
US20200326402A1 (en) | 2020-10-15 |
KR20190011778A (ko) | 2019-02-07 |
EP3252491A1 (en) | 2017-12-06 |
CN109477880A (zh) | 2019-03-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9749738B1 (en) | Synthesizing audio corresponding to a virtual microphone location | |
JP6592183B2 (ja) | モニタリング | |
US10045120B2 (en) | Associating audio with three-dimensional objects in videos | |
US10942252B2 (en) | Tracking system and tracking method | |
US9235241B2 (en) | Anatomical gestures detection system using radio signals | |
US9081417B2 (en) | Method and device for identifying contactless gestures | |
US10649536B2 (en) | Determination of hand dimensions for hand and gesture recognition with a computing interface | |
EP3077992A1 (en) | Fusing device and image motion for user identification, tracking and device association | |
WO2021084519A1 (en) | System for multi-path 5g and wi-fi motion detection | |
JP2019522187A (ja) | 装置および関連する方法 | |
US10375667B2 (en) | Enhancing indoor positioning using RF multilateration and optical sensing | |
JP6462528B2 (ja) | 移動体追跡装置及び移動体追跡方法及び移動体追跡プログラム | |
KR20240028481A (ko) | 실내 공간의 3차원 지도를 생성하기 위한 시스템 및 방법 | |
CN107111363B (zh) | 用于监视的方法、装置和系统 | |
JP2023010769A (ja) | 情報処理装置、制御方法、及びプログラム | |
US9292963B2 (en) | Three-dimensional object model determination using a beacon | |
US10306394B1 (en) | Method of managing a plurality of devices | |
US10133966B2 (en) | Information processing apparatus, information processing method, and information processing system | |
RU174044U1 (ru) | Аудиовизуальный многоканальный детектор наличия голоса | |
Luo et al. | Indoor smartphone SLAM with learned echoic location features | |
GB2581060A (en) | Methods and apparatus for dimensioning an object using proximate devices | |
CN114521015B (zh) | 定位方法、装置、存储介质及电子设备 | |
CN117859339A (zh) | 媒体设备及其控制方法和装置、目标跟踪方法和装置 | |
Dasari et al. | RoVaR: Robust Multi-agent Tracking through Dual-layer Diversity in Visual and RF Sensing | |
US20230059119A1 (en) | Information processing device, control method, and non-transitory computer-readable medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190117 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200122 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200129 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20200908 |