JP2013539088A - 拡張現実用の基準マーカー - Google Patents

拡張現実用の基準マーカー Download PDF

Info

Publication number
JP2013539088A
JP2013539088A JP2013516559A JP2013516559A JP2013539088A JP 2013539088 A JP2013539088 A JP 2013539088A JP 2013516559 A JP2013516559 A JP 2013516559A JP 2013516559 A JP2013516559 A JP 2013516559A JP 2013539088 A JP2013539088 A JP 2013539088A
Authority
JP
Japan
Prior art keywords
data
fiducial marker
marker
reflective
reference marker
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013516559A
Other languages
English (en)
Other versions
JP5635689B2 (ja
Inventor
マンジョーネ−スミス,ウィリアム,エイチ.
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Empire Technology Development LLC
Original Assignee
Empire Technology Development LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Empire Technology Development LLC filed Critical Empire Technology Development LLC
Publication of JP2013539088A publication Critical patent/JP2013539088A/ja
Application granted granted Critical
Publication of JP5635689B2 publication Critical patent/JP5635689B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/06009Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/06009Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
    • G06K19/06046Constructional details
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/88Image or video recognition using optical means, e.g. reference filters, holographic masks, frequency domain filters or spatial domain filters

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

拡張現実用の基準マーカーを提供する。基準マーカーを、環境内のオブジェクト上に配置することができ、基準マーカーは、光を光の源に向かって戻る方へ反射する再帰反射器を含む。基準マーカーの一部は、反射部分および反射性がより低い、または非反射性である部分を含む基準マーカー内のパターンを形成するために、マスクされまたは覆い隠される。反射部分および反射性がより低い、または非反射性である部分のパターンは、読取装置によって読み取ることができる、拡張されたイメージに含められるコンピュータ生成されたコンテンツを生成するのに使用されるデータを格納する。

Description

拡張現実は、しばしば、コンピュータ生成されたコンテンツによって拡張された実世界環境のビューまたはイメージを描写する。コンピュータ生成されたコンテンツとの実世界のイメージの組合せは、多くの異なる応用で有用であることが立証されてきた。広告、ナビゲーション、軍、旅行、教育、スポーツ、およびエンターテイメントが、拡張現実を使用できる領域の例である。
コンピュータ生成されたコンテンツとの実世界環境のイメージの融合は、拡張されたイメージをもたらす。しかし、コンピュータ生成されたコンテンツとの実世界イメージの融合を成功させることは、実世界イメージがどれほどよく認識されるのかに依存する。例えば、モニュメントのイメージの拡張を成功させることは、モニュメントがモニュメントのイメージを表示する装置によって認識されるかどうかに依存する可能性がある。より具体的には、モニュメントの名前、ロケーション、作成者、その他などのコンピュータ生成されたコンテンツの融合は、イメージ内のモニュメントが認識されるかどうかに依存する可能性がある。モニュメントが認識されないか知られていない場合には、コンピュータ生成されたコンテンツの提供は、非常にむずかしい提案になる。
イメージ内のオブジェクトまたは実世界オブジェクトを認識する1つの形は、基準マーカーの使用を介するものである。従来、基準マーカーは、イメージングシステムの視野で使用される、結果のイメージ内に現れるオブジェクトである。言い替えると、従来のマーカーは、通常、実世界オブジェクト上のマーカーとしてではなく、イメージ内のマーカーとして使用される。
しばしば、イメージ内の基準マーカーの外見は、イメージスケーリングの基準として働く。例えば、イメージ内の既知のロケーションにある基準マーカーを使用して、イメージの相対スケールを判定することができる。ある種のカメラは、イメージ内の基準マーカーとしてレゾークロス(reseau cross)を作ることができる。基準マーカーを使用して、イメージの特徴をより目立つものにすることもできる。例えば、モーションキャプチャ応用例は、基準マーカーを使用して、マークされた対象の動きを追跡することができる。イメージ内の基準マーカーは、独立のイメージを相関させることを可能にすることもできる。
残念ながら、拡張現実での基準マーカーの使用は、非常に制限され、前に述べたように、基準マーカーは、通常、実世界オブジェクト上ではなくイメージ内に見られる。
基準マーカーを有する実世界オブジェクトのいくつかの実例がある可能性があるが、これらのマーカーは、認識するのがむずかしい。中距離および長距離の基準マーカーの認識は、特に問題がある。さらに、従来の基準マーカーは、拡張現実応用例でコンピュータ生成されたコンテンツを生成するために変換できまたは使用できる、かなりの量のデータを格納することができない。
本明細書で開示する実施形態は、基準マーカーに関する。基準マーカーは、コンピュータ生成されたコンテンツを用いてイメージを拡張するのに使用できるデータを格納する。例示的実施形態では、基準マーカーは、材料のシートを含み、オブジェクトに取り付けられ得る。材料は、電磁放射を反射するようにも構成される。マスクは、材料の第1部分を覆い隠し、材料の第2部分を覆い隠さないように、材料に適用される。材料の第1部分および第2部分は、読取装置によって読み取られるデータを格納する。
例示的実施形態では、基準マーカーは、環境内のオブジェクトに取り付けることのできる材料を含むことができる。材料は、装置から受け取られた電磁放射を装置に向かって戻す方へ反射するように構成された再帰反射器(retroreflector)を有する第1部分を含む。材料の第2部分は、反射性がより低くまたは非反射性である。第1部分および第2部分は、パターンを形成し、基準マーカー内にデータを格納するように配置される。材料によって反射された電磁放射は、パターンに従って変調される。反射された電磁放射を、電磁放射を放つ読取装置によって検出し、読みとることができる。
もう1つの例示的実施形態では、コンピュータ生成されたイメージを用いて実世界イメージを拡張する方法は、実世界オブジェクト上に配置された基準マーカーに向かって光ビームを放つことを含む。反射された光ビームは、基準マーカーによって格納されたデータを含み、読みとることができる。基準マーカーから、光ビームを放った装置によって読み取られる。その後、コンピュータ生成されたコンテンツが、反射された光ビーム内に格納されたデータを使用して生成され、コンピュータ生成されたコンテンツを含む拡張されたイメージが、装置のディスプレイに表示される。
前述の要約は、例示的であるのみであって、いかなる形でも限定的であることは意図されていない。上で説明した例示的な態様、実施形態、および特徴に加えて、さらなる態様、実施形態、および特徴が、図面および次の詳細な説明を参照することによって明白になる。
空間内に配置された基準マーカーを含む環境の例を示す図である。 オブジェクトに取り付けられた基準マーカーを読み取る装置の例を示す図である。 基準マーカーの例示的実施形態を示す図である。 基準マーカーのもう1つの例示的実施形態を示す図である。 フォトニック結晶を使用して製造される基準マーカーの例示的実施形態を示す図である。 再帰反射器のアレイを含む基準マーカーの例示的実施形態を示す図である。 基準マーカーを使用して拡張されたイメージを生成する方法の例示的実施形態を示す図である。 基準マーカーを読み取り、基準マーカーから読み取られたデータを使用して拡張されたイメージを生成するように配置された例のコンピューティングデバイスを示すブロック図である。
次の詳細な説明では、本明細書の一部を形成する添付図面を参照する。図面では、文脈がそうではないと規定しない限り、同様の記号が、通常は同様の構成要素を識別する。発明を実施するための形態、図面、および特許請求の範囲で説明される例示的実施形態は、限定的であることを意図されたものではない。本明細書で提示される主題の趣旨または範囲から逸脱せずに、他の実施形態を利用することができ、他の変更を行うことができる。全般的に本明細書で説明され、図面に図示される本開示の態様を、さまざまな異なる構成で配置し、置換し、組み合わせ、分離し、設計することができ、そのすべてが本明細書で明示的に企図されていることが、たやすく理解されるであろう。
本明細書で開示される実施形態は、拡張現実アプリケーション用の基準マーカーを含む基準マーカーに関する。拡張現実では、基準マーカーを、オブジェクト認識、オブジェクト追跡、および/またはオブジェクトモデリングで支援するために空間内または環境内に配置されるタグとして実施することができる。限定ではなく例として、本明細書で開示される基準マーカーの実施形態は、能動的問合せをサポートし、比較的より長い距離で認識可能であり、通常の検査に対してあまり一目瞭然でなく、かつ/またはかなりより多くのデータを格納でき、もしくはかなりより多くのデータへのアクセスを可能にする。
本明細書で開示される基準マーカーのいくつかの実施形態は、再帰反射器を含む。再帰反射器は、光を、光の源に向かって戻す方へ反射する。その結果、複数の装置が、複数の方向から基準マーカーを読み取ることができる。再帰反射器を組み込んだ基準マーカーを、正しく構成された装置によって読み取るか問い合わせる(interrogate)ことのできるデータを、格納するか符号化するように構成することができる。基準マーカーを問い合わせることによって、基準マーカーに格納されまたは符号化されたデータを読み取るか取り出すことができる。
基準マーカー内の再帰反射器を、基準マーカー内でデータを符号化しまたは格納するために、部分的にマスクしまたは他の形で覆い隠すことができる。基準マーカー内または基準マーカー上に形成されるマスクのパターンを、1次元または多次元とすることができる。その結果、集光されたスキャニング読出(focused scanning read out)をサポートする基準マーカーは、ストレージファクタ(storage factor)の増加を可能にする。言い替えると、基準マーカー内に格納できる情報の量を、データがどのように格納されるのかおよび/またはデータがどのように読み取られるのかに基づいて、所与のサイズまたは面積について増やすことができる。
基準マーカーを、環境内のオブジェクト上に控え目に(unobtrusively)配置することができる。したがって、基準マーカーの少なくともいくつかの実施形態は、結果のイメージ内だけに配置されるのではなく、実世界オブジェクトに取り付けられる。これらの基準マーカーを読み取る装置は、基準マーカー内に格納されるか基準マーカーによってアクセス可能にされるデータを使用して、拡張現実イメージを生成することができる。さらに、装置の他のコンポーネント(コンパス、全地球測位センサなど)を、基準マーカーから読み取られたデータと組み合わせて使用して、拡張現実イメージを生成し、表示することができる。
基準マーカーは、一般に、オブジェクトに取り付けられる、電磁放射を反射するように構成された材料のシート(例えば、成型プラスチック、半導体材料、印刷された紙、光学反射器、ラジオ周波数反射器)を含む。材料のシートは、反射材料の一部を覆い隠すマスクをその上に適用させまたは固定させることができる。マスクは、油脂、金属シールド、光学的に不透明の紙、またはよごれ(dirt)など、反射される電磁放射を阻止するか覆い隠す任意の材料の形をとることができる。マスクは、意図的にまたは不注意で適用される可能性がある。マスクを、接着剤、ステーブル、釘、リベット、糊、ベルクロなどの機械的取付け、または他の技法を用いて適用することができる。
いくつかの実例では、基準マーカーが新しい情報を格納するように、マスクを再配置する(例えば、除去し、新しい方向を与え、新しいマスクに置換する)ことができる。例えば、材料のシートは、反射材料を含むことができる。反射材料の上に新しいマスクを配置することによってパターンが変更されることで格納されるデータが変化するように、マスクを、別々にすることができる。
代替案では、材料のシート上のいくつか区域を、反射コンポーネントがないものとすることができる。したがって、材料のシートは、反射部分と、反射性がより低い、または非反射性である部分とを有する。一緒に、反射部分および非反射部分を、読取装置によって読み取ることのできるデータを格納するように配置することができる。前に述べたように、マスクを、基礎になる反射材料を覆い隠す追加材料によって、または、ある部分が反射特性を含まないか有しないように材料のシートを形成することによって、形成することができる。もう1つの例では、非反射部分を、反射部分の選択された区域に損傷を与えることによって形成することができる。損傷を与えられる部分が、マスクの例である。
いくつかの例では、材料のシートを使用して、複数の基準マーカーを作成することができる。その後、材料のシートは、個々の基準マーカーを形成するためにダイシングされ、この個々の基準マーカーは、その後、必要に応じてパッケージ化され、または他の形で配置のために準備される。
もう1つの例では、パターンに従って再帰反射性ペイントを用いて基準マーカーをペイントすることによるなど、基準マーカーをオブジェクトに直接に適用することができる。その中にパターンを形成されたテンプレートを提供することができる。テンプレートを、オブジェクトに当てることができ、再帰反射材料を有するペイントを、テンプレートに適用することができる。テンプレートが除去された時に、オブジェクト上のペイントは、テンプレートのパターンに従う基準マーカーを形成する。
図1に、空間内に配置された基準マーカーを含む環境の例を示す。図1では、基準マーカー122が、オブジェクト120上に配置されている。基準マーカー122を、控え目に配置することができ、オブジェクト120と審美的に互換になるように構成することができる。基準マーカー122のサイズは、その中に格納されるデータの量に依存するものとすることができる。これは、環境考慮事項(例えば、環境に対する基準マーカーの影響)と基準マーカー122のサイズとのバランスをとることを可能にする。
基準マーカー122は、1インチ平方のスケールとすることができるが、よりよい印刷プロセスは、基準マーカーを劇的に縮小することができる。有効照会距離は、限定ではなく例として、1インチから、例えば望遠鏡イメージャを介するなど受信器の感度に応じて、1マイル超の範囲にわたる可能性がある。当業者は、基準マーカー122を、1インチ平方のスケール、またはより大きく、またはより小さくすることができることを了解することができる。読取距離を、受信器の感度に依存するものとすることができる。
図1には、ディスプレイ102を含む装置100も示されている。装置100は、装置100がオブジェクト120の実世界イメージ104を表示しまたは示すことを可能にするイメージングシステム(例えば、カメラまたはビデオカメラ)を含むことができる。ディスプレイ102は、実世界イメージ104内にコンピュータ生成されたコンテンツ106をも提示する。実世界イメージ104およびコンピュータ生成されたコンテンツ106はともに、拡張されたイメージ114の例である。
コンピュータ生成されたコンテンツ106を、さまざまな方法でさまざまな形で表示することができる。コンピュータ生成されたコンテンツ106(および、したがって拡張されたイメージ114)は、テキスト、イメージ、ビデオ、色、強調表示、または類似物、あるいはその任意の組合せを含むことができる。実世界イメージ104を、装置100のカメラ(または他の入力)によって取り込まれるものが何であれ、そのリアルタイムイメージとすることができる。装置100が移動し、装置100のビューが変化する時に、装置100によって表示される実世界イメージ100は、それ相応に変化する。適用可能な場合には、拡張されたイメージ114内のコンピュータ生成されたコンテンツ106の位置決めを、装置100の移動に従って更新することができる。
コンピュータ生成されたコンテンツ106を、実世界イメージ104とコンピュータ生成されたコンテンツ106との両方が同時に可視になるように提示することができる。したがって、一例では、実世界イメージ104およびコンピュータ生成されたコンテンツ106のうちの少なくとも1つが、部分的に透明である。もう1つの例では、実世界イメージ104の諸部分がコンピュータ生成されたコンテンツによって完全に覆い隠されるように、コンピュータ生成されたコンテンツ106をディスプレイ102の特定の部分に配置することができる。例えば、テキストを、ディスプレイ102内のオブジェクト120のイメージ104の直接上に、または実世界イメージ104に最小限に干渉するためにディスプレイ102の最下部に、配置することができる。
図1では、装置100は、拡張されたイメージ114を生成し、表示するのに使用されるコンポーネント112を含む。コンポーネント112は、例としてのみ、カメラ、コンパス、全地球測位センサ、または類似物、あるいはその任意の組合せを含む。コンポーネント112を装置100によって使用して、拡張されたイメージ114を生成することができる。例えば、オブジェクト120のロケーションに対する相対的な装置100のロケーションおよび装置100の方位を、それぞれ、GPSセンサおよびコンパスによって判定することができ、コンピュータ生成されたコンテンツ106の生成で使用することができる。いくつかの実例では、基準マーカー122は、ロケーションデータを格納することができる。このロケーションデータを、GPSセンサおよび/またはコンパスからのデータと組み合わせて、オブジェクト120に対して相対的にユーザを突き止めるのに、および/またはコンピュータ生成されたコンテンツ106を生成するのに使用することができる。
いくつかの実例では、装置100は、電話網、インターネット、ローカルエリアネットワーク、または類似物あるいはその任意の組合せなどのネットワーク110を介してサーバ108と通信することができる。コンポーネント112によって生成され、検出され、または他の形で判定された情報を、サーバ108に送信し、拡張されたイメージ114の生成に使用することができる。コンポーネント112によって判定された情報を、装置100によって直接に使用することもでき、サーバ108に送信しないものとすることができる。
例えば、基準マーカー122から読み取られた情報を、サーバ108に送信することができる。サーバ108は、コンピュータ生成されたコンテンツ106の少なくともいくつかを装置100に応答することができる。さらに、全地球測位センサが、ロケーションをサーバ108に供給することができる。全地球測位センサによって判定されたロケーションおよび基準マーカー122から読み取られたデータを組み合わせて、コンピュータ生成されたコンテンツ106を生成し、かつ/またはコンピュータ生成されたコンテンツ106を表示することができる。代替案では、拡張されたイメージ114を生成するのに使用されるデータの少なくともいくつかを、装置100にローカルに格納することができる。また、コンピュータ生成されたコンテンツ106内で表されるデータを、全体的に基準マーカー122から読み取ることができる。
装置100を、基準マーカー122を読み取るように構成することができる。基準マーカー122によって格納されるデータまたは基準マーカー122によってアクセス可能にされるデータを、コンピュータ生成されたコンテンツ106内にレンダリングすることができる。例えば、基準マーカー122は、オブジェクト120の説明を格納することができる。例えば、オブジェクト120がモニュメントである場合には、基準マーカー122は、作成日付、アーティスト名、モニュメントの理由、モニュメントの説明、または類似物を格納することができる。オブジェクト120が会社である場合には、基準マーカー122は、電話番号などの連絡先情報を格納することができる。当業者は、基準マーカー122によって格納されるか基準マーカー122内で符号化されるデータが大幅に変化し得ることを了解することができる。さらに、基準マーカー122のフォーマットを標準化して、任意の正しく規定される装置(any properly provisioned device)が基準マーカー122によって格納されたデータを読み取り、理解することを可能にすることができる。
一実施形態では、基準マーカー122は、サーバ108からのデータにアクセスするのに装置100によって使用できるリンク(例えば、Uniform Resource Locator(URL))を格納することができる。この例は、基準マーカー122を経時的に更新することを効果的に可能にし、基準マーカー122によって格納されるかアクセス可能にすることのできるデータの有効量をも増やす。装置100がサーバ108にアクセスできるようになった後に、サーバ108から受信される対応するデータは、コンピュータ生成されたコンテンツ106を含む。これは、拡張されたイメージ114が、異なるタイプのデータを含むか、異なる時に異なるデータを含むことを可能にする。サーバ108によって供給できるデータを、経時的に変更することができ、あるいは、特定の装置構成に適合させることができ、あるいは、類似物を行うことができる。例えば、サーバ108は、装置の構成(例えば、スクリーンサイズ、解像度など)を記述するデータを受信することもできる。これは、サーバ108が、要求する装置のために特に準備されたコンピュータ生成されたコンテンツを配送することを可能にする。
図2に、基準マーカー122を読み取る装置100の例を示す。装置100のコンポーネント112は、光源202および光検出器204をも含むことができる。光源202は、光ビームを放つように構成される。光源202は、例えば所定の周波数のまたは所定の周波数範囲内の光を放つレーザを含むことができる。検出器204を、光源202によって放たれた光の周波数を検出するように構成することができる。検出器204を、フォトダイオードまたは類似物などの光検出器とすることができる。
図2では、装置100の光源202によって放たれた光は、オブジェクト100に向けられ、より具体的には基準マーカー122に向けられる。基準マーカー122は、装置100に向かって戻す方へ光を反射する。装置100は、検出器204を用いて、反射された光を検出して、基準マーカー122に格納されたデータを読み取る。
一例では、検出器204は、反射された光の強度を検出し、基準マーカー122内のマスクパターンに従って成形される波形を生成する。その後、生成された波形を、復号し、拡張されたイメージ114に含まれるコンピュータ生成されたコンテンツ106を生成するのに使用することができる。
基準マーカー122は、光をその源に向かって戻す方へ反射する再帰反射器とするか、これを含むことができる。この例では、基準マーカー122は、光源202によって放たれた光を検出器204に向かって戻す方へ反射する。より一般的には、基準マーカー122は、電磁放射の源に平行または実質的に平行であるベクトルに沿って戻す方へ電磁放射を反射する。本明細書でより詳細に説明するように、基準マーカー122は、コーナーキューブ、フォトニック結晶、キャッツアイ再帰反射器、または類似物あるいはその任意の組合せを含むことができる。
図3に、基準マーカー300の例示的実施形態を示す。基準マーカー300は、基準マーカー122の例である。この例では、基準マーカー300は、単一の次元内に配置される。基準マーカー122は、反射区域304および反射性がより低い、または非反射性である区域302を含む。光源202が基準マーカー122を読み取る時に、検出器204は、反射区域304および反射性がより低い、または非反射性である区域302によって形成されるパターンに対応する波形306を生成することができる。基準マーカー300の(または、本明細書で開示される他の基準マーカーの)単純な受動的読取を、環境反射光を光学的に観察することによって達成することができる。その代わりに、光のビームを、ラスタスキャンのような技法で基準マーカー300上で能動的にスキャンすることができる。どちらの手法も、近い範囲と1マイルを超える距離との両方で有効であることを立証することができる。しかし、より長い距離は、より大きい照明エネルギーと基準マーカー300のより大きいサイズとの両方を必要とする可能性がある。
基準マーカー300を、異なる形で製造することができる。基準マーカー300は、コーナーキューブ反射器のシートを含むことができる。しかし、シートの表面にマスクを適用して、反射性がより低い、または非反射性である区域302を形成することができる。代替案では、反射性がより低い、または非反射性である区域302が、コーナーキューブ反射器を含まないものとすることができる。
基準マーカー300を、ラスタスキャン技法を使用して読み取ることができる。例えば、光源を、集光されたレーザにして、基準マーカー300内のデータを読み取ることができる。
図4に、基準マーカー400のもう1つの例示的実施形態を示す。基準マーカー400は、基準マーカー122のもう1つの例であり、複数の次元でデータを格納しまたはコーディングする。基準マーカー400は、反射区域402および反射性がより低い、または非反射性である区域404を含む。この例では、基準マーカー400によって格納されまたは表されるデータを、基準マーカーの区域または基準マーカー400の諸部分を照明できる散乱されたレーザを用いて読み取ることができる。この例では、基準マーカー400の多次元区域を、適切な光源を用いて並列に読み出すことができる。基準マーカー400の多次元コーディングは、基準マーカー400の所与のサイズについて、かなりより多くの情報を符号化することができる。多次元コーディングは、固定されたサイズのマーカー400がより多くの情報を符号化することおよび/またはより小さい基準マーカーの使用を可能にする。より小さい多次元マーカーでさえ、より大きい単一次元基準マーカーより多くのデータを格納することができる。この多次元手法は、並列読出をさらに可能にする。例えば、2つの照明源を使用して、最初の2つの行からのデータを同時に読み出すことができる。
比較して、基準マーカー400は、基準マーカー300より多くのデータを格納することができ、したがって、より少ない面積を占めることができる。これは、例えば、環境内のオブジェクト上に基準マーカーを配置する時に有用である可能性がある。
図5に、フォトニック結晶から製造される基準マーカー500の例示的実施形態を示す。基準マーカー500は、基準マーカー122のもう1つの例である。この例では、基準マーカー500は、複数の層502および504から形成される。層502は、層504の屈折率とは異なる屈折率を有する。層502および504は、高屈折率および低屈折率または高誘電率および低誘電率を有する材料の交番する層を描写するものである。層504および504を、基板上に形成しまたは成長させることができる。適切な材料の例は、シリコン、プラスチック、およびいくつかの半硬質ゲルを含む。層502および504のそれぞれの厚さを、例えば、光の特定の周波数について構成することができる。いくつかの例では、層502および504のそれぞれの厚さは、所望の波長の1/4である.
層502および504の材料の正しい選択は、光のある周波数を反射する構造をもたらす。その結果、基準マーカー500は、源からの光を源に戻す方へ反射することができる。基準マーカー500を、いかなる形でも照明源を基準マーカー500に位置合せする必要なしに、単一方向読出をもたらすように構築することができる。
基準マーカー500内でのデータの符号化を、マスク508を設けることによって達成することができる。パターンに従って基準マーカー500の表面の一部をマスクすることによって、データを符号化し、装置によって読み取ることができる。この例では、マスク508は、基準マーカー500の表面上に選択的に形成される材料の追加層を含むことができる。例えば、マスク508を、金属層とすることができる。区域506は、反射性であり、マスク508を有しないものとすることができる。いくつかの例で、基準マーカー500は、基準マーカー500の動作または機能に干渉しない、基準マーカー500の最上部に形成される保護層を有することができる。
図5には、基準マーカー500をエッチングすることによってマスクを形成できることも示されている。例えば、基準マーカー500をエッチングすることができ、別の材料510を、基準マーカー500のエッチングされた区域に堆積して、マスクを形成し、基準マーカー500内のパターンを作成することができる。材料510は、交番する層を含まないものとすることができ、あるいは、光の関連する周波数または波長が基準マーカー500のうちで材料510によって占められる部分について反射されないように光のある波長について非反射性である材料であるものとすることができる。
図6に、再帰反射器のアレイ602を含む基準マーカー600の例示的実施形態を示す。基準マーカー600は、基準マーカー122の例である。この例では、再帰反射器のアレイ602は、コーナーキューブ604を含む。アレイ602は、コーナーキューブ604の複数の行および/または列を含むことができる。コーナーキューブ604のアレイ602を、成形プラスチックを使用して形成することができる。コーナーキューブ604のそれぞれは、通常、3つの相互に垂直な交差する平らな表面を含み、これらの表面は、光を含む電磁放射を源に向かって戻る方へ反射する。
基準マーカー600を、環境内に配置された後に、異なるポジションまたはロケーションから読み取ることができる。言い替えると、正面からまたはある角度で基準マーカー600に近付く光は、その光の源のロケーションに戻る方へ反射される。その結果、基準マーカー600の方位は、基準マーカー600の、装置によって読み取られる能力に影響しないものとすることができる。基準マーカー600は、データを格納するパターンを形成するためにマスクを含むこともできる。マスクを、コーナーキューブ604のうちのいくつかを覆い隠すことによって、またはある区域にコーナーキューブがなくなるようにアレイ602を製造することによって、形成することができる。
図7に、拡張されたイメージを生成する方法700の例示的実施形態を示す。方法700のブロック702では、装置によって基準マーカーに向けて光ビームを放つ。光源を、基準マーカーをスキャンするように構成することができ、あるいは、放たれる光が基準マーカーに問い合わせることができるように、装置を移動することができる。
ブロック704では、装置が、反射された光ビームを検出し、読み取る。反射された光ビームは、通常、基準マーカーのマスクまたはパターンに従って変調されている。したがって、反射された光ビームは、基準マーカーによって格納されたデータを含む。
ブロック706では、反射された光ビーム内のデータを使用して、拡張されたイメージに含めるべきコンピュータ生成されたコンテンツを生成する。一例では、コンピュータ生成されたコンテンツは、基準マーカーに格納されたデータに対応する。もう1つの例では、基準マーカーに格納されたデータは、装置が基準マーカーに関連するコンピュータ生成されたコンテンツにアクセスする(例えば、インターネットを介して)ことを可能にすることができる。ブロック708では、コンピュータ生成されたコンテンツおよび/または実世界オブジェクトのイメージを含む拡張されたイメージを、装置上で表示する。
当業者は、このプロセスおよび方法ならびに本明細書で開示される他のプロセスおよび方法について、プロセスおよび方法で実行される機能を異なる順序で実施できることを了解するであろう。さらに、概要を示されたステップおよび動作は、例として提供されるのみであり、ステップおよび動作の一部を、開示される実施形態の本質から逸脱せずに、オプションとし、より少数のステップおよび動作に組み合わせ、あるいは追加のステップおよび動作に拡張することができる。
本開示は、さまざまな態様の例示であることを意図された、本願で説明される特定の実施形態に関して限定されてはならない。当業者に明白であるように、多数の修正形態および変形形態を、その趣旨および範囲から逸脱せずに作ることができる。本開示の範囲内の機能的に同等の方法および装置は、本明細書に列挙された方法および装置に加えて、前述の説明から当業者に明白であろう。そのような修正形態および変形形態は、添付の特許請求の範囲の範囲に含まれることが意図されている。本開示は、添付の特許請求の範囲が権利を与えられる同等物の全範囲と一緒に、添付の特許請求の範囲の用語によってのみ限定されなければならない。本開示が、特定の方法、試薬、化合物合成物、または生体系に限定されず、これらの方法、試薬、化合物合成物、または生体系が、もちろん変化し得ることを理解されたい。本明細書で使用される用語法が、特定の実施形態を説明するのみのためのものであって、限定的であることを意図されていないことをも理解されたい。
例示的実施形態では、本明細書で説明される動作、プロセスなどのいずれをも、コンピュータ可読媒体に格納されたコンピュータ可読命令として実施することができる。コンピュータ可読命令を、モバイルユニット、ネットワーク要素、および/または任意の他のコンピューティングデバイスのプロセッサによって実行することができる。
システムの側面でのハードウェアの実装形態とソフトウェアの実装形態との間には、ほとんど相違が残されていない。ハードウェアまたはソフトウェアの使用は、一般に(いつもそうではないが、ある状況ではハードウェアとソフトウェアの間の選択が重要になり得るという点で)コスト対効果のトレードオフを表す設計上の選択である。本明細書に記載された、プロセスおよび/またはシステムおよび/または他の技術をもたらすことができるさまざまな達成手段があり(例えば、ハードウェア、ソフトウェア、および/またはファームウェア)、好ましい達成手段は、プロセスおよび/またはシステムおよび/または他の技術が導入される状況によって異なる。例えば、実装者が速度と正確性が最も重要であると決定すると、実装者は主にハードウェアおよび/またはファームウェアの達成手段を選択することができる。フレキシビリティが最も重要なら、実装者は主にソフトウェアの実装形態を選択することができる。または、さらに別の代替案として、実装者は、ハードウェア、ソフトウェア、および/またはファームウェアのなんらかの組合せを選択することができる。
前述の詳細な説明では、ブロック図、フローチャート、および/または例の使用によって、装置および/またはプロセスのさまざまな実施形態を説明してきた。そのようなブロック図、フローチャート、および/または例が1つまたは複数の機能および/または動作を含む限りにおいて、そのようなブロック図、フローチャート、または例の中のそれぞれの機能および/または動作は、広範囲のハードウェア、ソフトウェア、ファームウェア、または実質上それらのすべての組合せにより、個別におよび/または集合的に実装可能であることが、当業者には理解されるであろう。ある実施形態では、本明細書に記載された主題のいくつかの部分は、特定用途向け集積回路(ASIC)、フィールドプログラマブルゲートアレイ(FPGA)、デジタルシグナルプロセッサ(DSP)、または他の集積化方式によって実装することができる。しかし、本明細書で開示された実施形態のいくつかの態様が、全体においてまたは一部において、1つまたは複数のコンピュータ上で動作する1つまたは複数のコンピュータプログラムとして(例えば、1つまたは複数のコンピュータシステム上で動作する1つまたは複数のプログラムとして)、1つまたは複数のプロセッサ上で動作する1つまたは複数のプログラムとして(例えば、1つまたは複数のマイクロプロセッサ上で動作する1つまたは複数のプログラムとして)、ファームウェアとして、あるいは実質上それらの任意の組合せとして、等価に集積回路に実装することができることを、当業者は認識するであろうし、電気回路の設計ならびに/またはソフトウェアおよび/もしくはファームウェアのコーディングが、本開示に照らして十分当業者の技能の範囲内であることを、当業者は認識するであろう。さらに、本明細書に記載された主題のメカニズムをさまざまな形式のプログラム製品として配布することができることを、当業者は理解するであろうし、本明細書に記載された主題の例示的な実施形態が、実際に配布を実行するために使用される信号伝達媒体の特定のタイプにかかわらず適用されることを、当業者は理解するであろう。信号伝達媒体の例には、フロッピーディスク、ハードディスクドライブ、CD、DVD、デジタルテープ、コンピュータメモリ、などの記録可能なタイプの媒体、ならびに、デジタル通信媒体および/またはアナログ通信媒体(例えば、光ファイバケーブル、導波管、有線通信リンク、無線通信リンクなど)の通信タイプの媒体が含まれるが、それらには限定されない。
本明細書で説明したやり方で装置および/またはプロセスを記載し、その後そのように記載された装置および/またはプロセスを、データ処理システムに統合するためにエンジニアリング方式を使用することは、当技術分野で一般的であることを当業者は認識するであろう。すなわち、本明細書に記載された装置および/またはプロセスの少なくとも一部を、妥当な数の実験によってデータ処理システムに統合することができる。通常のデータ処理システムは、一般に、システムユニットハウジング、ビデオディスプレイ装置、揮発性メモリおよび不揮発性メモリなどのメモリ、マイクロプロセッサおよびデジタル信号プロセッサなどのプロセッサ、オペレーティングシステムなどの計算実体、ドライバ、グラフィカルユーザインターフェース、およびアプリケーションプログラムのうちの1つもしくは複数、タッチパッドもしくはスクリーンなどの1つもしくは複数の相互作用装置、ならびに/またはフィードバックループおよびコントロールモータを含むコントロールシステム(例えば、位置検知用および/もしくは速度検知用フィードバック、コンポーネントの移動用および/もしくは数量の調整用コントロールモータ)を含むことを、当業者は理解するであろう。通常のデータ処理システムは、データコンピューティング/通信システムおよび/またはネットワークコンピューティング/通信システムの中に通常見られるコンポーネントなどの、市販の適切なコンポーネントを利用して実装することができる。
本明細書に記載された主題は、さまざまなコンポーネントをしばしば例示しており、これらのコンポーネントは、他のさまざまなコンポーネントに包含されるか、または他のさまざまなコンポーネントに接続される。そのように図示されたアーキテクチャは、単に例示にすぎず、実際には、同じ機能を実現する多くの他のアーキテクチャが実装可能であることが理解されよう。概念的な意味で、同じ機能を実現するコンポーネントの任意の構成は、所望の機能が実現されるように効果的に「関連付け」される。したがって、特定の機能を実現するために組み合わされた、本明細書における任意の2つのコンポーネントは、アーキテクチャまたは中間のコンポーネントにかかわらず、所望の機能が実現されるように、お互いに「関連付け」されていると見ることができる。同様に、そのように関連付けされた任意の2つのコンポーネントは、所望の機能を実現するために、互いに「動作可能に接続」または「動作可能に結合」されていると見なすこともでき、そのように関連付け可能な任意の2つのコンポーネントは、所望の機能を実現するために、互いに「動作可能に結合できる」と見なすこともできる。動作可能に結合できる場合の具体例には、物理的にかみ合わせ可能な、および/もしくは物理的に相互作用するコンポーネント、ならびに/またはワイヤレスに相互作用可能な、および/もしくはワイヤレスに相互作用するコンポーネント、ならびに/または論理的に相互作用する、および/もしくは論理的に相互作用可能なコンポーネントが含まれるが、それらに限定されない。
図8は、本発明に従って、基準マーカーを読み取り、基準マーカーから読み取られたデータを使用して拡張されたイメージを生成するように配置された例のコンピューティングデバイス800を示すブロック図である。非常に基本的な構成802では、コンピューティングデバイス800は、通常、1つまたは複数のプロセッサ804およびシステムメモリ806を含む。メモリバス808を、プロセッサ804とシステムメモリ806との間の通信に使用することができる。
所望の構成に応じて、プロセッサ804を、マイクロプロセッサ(μP)、マイクロコントローラ(μC)、デジタル信号プロセッサ(DSP)、またはその任意の組合せを含むがこれらに限定されない任意のタイプとすることができる。プロセッサ804は、レベル1キャッシュ810およびレベル2キャッシュ812などのもう1レベルのキャッシング、プロセッサコア814、ならびにレジスタ816を含むことができる。例のプロセッサコア814は、算術論理ユニット(ALU)、浮動点少数ユニット(FPU)、デジタル信号処理コア(DSPコア)、またはその任意の組合せを含むことができる。例のメモリコントローラ818を、プロセッサ804と共に使用することもでき、あるいは、いくつかの実施態様では、メモリコントローラ818を、プロセッサ804の内部部分とすることができる。
所望の構成に応じて、システムメモリ806を、揮発性メモリ(RAMなど)、不揮発性メモリ(ROM、フラッシュメモリ、その他など)、またはその任意の組合せを含むがこれに限定されない任意のタイプのメモリとすることができる。システムメモリ806は、オペレーティングシステム820、1つまたは複数のアプリケーション822、およびプログラムデータ824を含むことができる。アプリケーション822は、基準マーカーから読み取られるか基準マーカーを読み取ることによってアクセス可能にされるコンテンツを作り、表示するように配置された拡張現実アプリケーション826を含むことができる。プログラムデータ824は、本明細書で説明されるように拡張されたイメージを生成するのに有用である可能性がある基準マーカーから読み取られた基準マーカーデータ828を含むことができる。基準マーカーデータ828は、拡張されたイメージを生成する際に使用できる他のデータを含むこともできる。いくつかの実施形態では、アプリケーション822を、拡張されたイメージが生成され表示されるように、オペレーティングシステム820上でプログラムデータ824を用いて動作するように配置することができる。この説明された基本的な構成802は、図8では、内側の破線内のコンポーネントによって示される。
コンピューティングデバイス800は、追加の特徴または機能性ならびに基本的な構成802とすべての必要な装置およびインターフェースとの間の通信を容易にするための追加のインターフェースを有することができる。例えば、バス/インターフェースコントローラ830を使用して、基本的な構成802と1つまたは複数のデータストレージ装置832との間のストレージインターフェースバス834を介する通信を容易にすることができる。データストレージ装置832は、取外し式ストレージ装置836、非取外し式ストレージ装置838、またはその組合せとすることができる。取外し式ストレージ装置および非取外し式ストレージ装置の例は、2〜3例を挙げると、フレキシブルディスクドライブおよびハードディスクドライブ(HDD)などの磁気ディスク装置、コンパクトディスク(CD)ドライブまたはデジタル多用途ディスク(DVD)ドライブなどの光ディスクドライブ、ソリッドステートドライブ(SSD)、およびテープドライブを含む。例のコンピュータ記憶媒体は、コンピュータ可読命令、データ構造、プログラムモジュール、または他のデータなどの情報の格納のための任意の方法または技術で実施される、揮発性および不揮発性の、取外し式および非取外し式の媒体を含むことができる。
システムメモリ806、取外し式ストレージ装置836、および非取外し式ストレージ装置838は、コンピュータ記憶媒体の例である。コンピュータ記憶媒体は、RAM、ROM、EEPROM、フラッシュメモリ、または他のメモリ技術、CD−ROM、デジタル多用途ディスク(DVD)、または他の光ストレージ、磁気カセット、磁気テープ、磁気ディスクストレージ、または他の磁気ストレージ装置、あるいは所望の情報を格納するのに使用でき、コンピューティングデバイス800によってアクセスできる任意の他の媒体を含むが、これに限定はされない。そのようなすべてのコンピュータ記憶媒体を、コンピューティングデバイス800の一部とすることができる。
コンピューティングデバイス800は、さまざまなインターフェース装置(例えば、出力装置842、周辺インターフェース844、および通信装置846)から基本的な構成802へのバス/インターフェースコントローラ830を介する通信を容易にするインターフェースバス840を含むこともできる。例の出力装置842は、1つまたは複数のA/Vポート852を介してディスプレイまたはスピーカなどのさまざまな外部装置へ通信するように構成できる、グラフィックス処理ユニット848およびオーディオ処理ユニット850を含む。例の周辺インターフェース844は、1つまたは複数のI/Oポート858を介して入力装置(例えば、キーボード、マウス、ペン、音声入力装置、タッチ入力装置など)または他の周辺装置(例えば、プリンタ、スキャナなど)などの外部装置と通信するように構成できる、シリアルインターフェースコントローラ854またはパラレルインターフェースコントローラ856を含む。例の通信装置846は、1つまたは複数の通信ポート864を介するネットワーク通信リンク上での1つまたは複数の他のコンピューティングデバイス862との通信を容易にするように配置できる、ネットワークコントローラ860を含む。
ネットワーク通信リンクを、通信媒体の1つの例とすることができる。通信媒体を、通常、搬送波または他のトランスポート機構などの変調されたデータ信号内のコンピュータ可読命令、データ構造、プログラムモジュール、または他のデータによって実施することができ、通信媒体は、任意の情報配送媒体を含むことができる。「変調されたデータ信号」は、信号内で情報を符号化する形でその特性のうちの1つまたは複数を設定されまたは変更された信号とすることができる。限定ではなく例として、通信媒体は、有線ネットワークまたは直接配線接続などの有線媒体と、音響、ラジオ周波数(RF)、マイクロ波、赤外線(IR)、および他の無線媒体などの無線媒体とを含むことができる。本明細書で使用される時に、用語コンピュータ可読媒体は、記憶媒体と通信媒体との両方を含むことができる。
コンピューティングデバイス800を、セル電話機、携帯情報端末(PDA)、パーソナルメディアプレイヤ装置、無線ウェブウォッチ装置、パーソナルヘッドセット装置、特定用途向け装置、または上記機能のいずれかを含むハイブリッド装置などの小フォームファクタポータブル(またはモバイル)電子装置の一部として実施することができる。コンピューティングデバイス800を、ラップトップコンピュータ構成と非ラップトップコンピュータ構成との両方を含むパーソナルコンピュータとして実施することもできる。
本明細書における実質的にすべての複数形および/または単数形の用語の使用に対して、当業者は、状況および/または用途に適切なように、複数形から単数形に、および/または単数形から複数形に変換することができる。さまざまな単数形/複数形の置き換えは、理解しやすいように、本明細書で明確に説明することができる。
通常、本明細書において、特に添付の特許請求の範囲(例えば、添付の特許請求の範囲の本体部)において使用される用語は、全体を通じて「オープンな(open)」用語として意図されていることが、当業者には理解されよう(例えば、用語「含む(including)」は、「含むがそれに限定されない(including but not limited to)」と解釈されるべきであり、用語「有する(having)」は、「少なくとも有する(having at least)」と解釈されるべきであり、用語「含む(includes)」は、「含むがそれに限定されない(includes but is not limited to)」と解釈されるべきである、など)。導入される請求項で具体的な数の記載が意図される場合、そのような意図は、当該請求項において明示的に記載されることになり、そのような記載がない場合、そのような意図は存在しないことが、当業者にはさらに理解されよう。例えば、理解の一助として、添付の特許請求の範囲は、導入句「少なくとも1つの(at least one)」および「1つまたは複数の(one or more)」を使用して請求項の記載を導くことを含む場合がある。しかし、そのような句の使用は、同一の請求項が、導入句「1つまたは複数の」または「少なくとも1つの」および「a」または「an」などの不定冠詞を含む場合であっても、不定冠詞「a」または「an」による請求項の記載の導入が、そのように導入される請求項の記載を含む任意の特定の請求項を、単に1つのそのような記載を含む実施形態に限定する、ということを示唆していると解釈されるべきではない(例えば、「a」および/または「an」は、「少なくとも1つの」または「1つまたは複数の」を意味すると解釈されるべきである)。同じことが、請求項の記載を導入するのに使用される定冠詞の使用にも当てはまる。また、導入される請求項の記載で具体的な数が明示的に記載されている場合でも、そのような記載は、少なくとも記載された数を意味すると解釈されるべきであることが、当業者には理解されよう(例えば、他の修飾語なしでの「2つの記載(two recitations)」の単なる記載は、少なくとも2つの記載、または2つ以上の記載を意味する)。さらに、「A、BおよびC、などの少なくとも1つ」に類似の慣例表現が使用されている事例では、通常、そのような構文は、当業者がその慣例表現を理解するであろう意味で意図されている(例えば、「A、B、およびCの少なくとも1つを有するシステム」は、Aのみ、Bのみ、Cのみ、AおよびBを共に、AおよびCを共に、BおよびCを共に、ならびに/またはA、B、およびCを共に、などを有するシステムを含むが、それに限定されない)。「A、B、またはC、などの少なくとも1つ」に類似の慣例表現が使用されている事例では、通常、そのような構文は、当業者がその慣例表現を理解するであろう意味で意図されている(例えば、「A、B、またはCの少なくとも1つを有するシステム」は、Aのみ、Bのみ、Cのみ、AおよびBを共に、AおよびCを共に、BおよびCを共に、ならびに/またはA、B、およびCを共に、などを有するシステムを含むが、それに限定されない)。2つ以上の代替用語を提示する事実上いかなる離接する語および/または句も、明細書、特許請求の範囲、または図面のどこにあっても、当該用語の一方(one of the terms)、当該用語のいずれか(either of the terms)、または両方の用語(both terms)を含む可能性を企図すると理解されるべきであることが、当業者にはさらに理解されよう。例えば、句「AまたはB」は、「A」または「B」あるいは「AおよびB」の可能性を含むことが理解されよう。
さらに、本開示の特徴または態様が、マーカッシュグループに関して説明される場合に、当業者は、本開示が、これによってマーカッシュグループの任意の個々のメンバまたはメンバのサブグループに関しても説明されることを認めるであろう。
当業者によって理解されるように、書かれた説明を提供することに関してなど、すべてにおいて、本明細書で開示されるすべての範囲は、任意のすべての可能な部分範囲およびその部分範囲の組合せをも包含する。すべてのリストされた範囲を、少なくとも等しい半分、1/3、1/4、1/5、1/10などに分割された同一の範囲を十分に記述し、可能にするものとしてたやすく認めることができる。非限定的な例として、本明細書で述べられる各範囲を、下側1/3、中央1/3、および上側1/3などにたやすく分解することができる。やはり当業者によって理解されるように、「up to(まで)」、「at least(少なくとも)」、および類似物などのすべての言葉は、具陳された数を含み、その後に上で述べたように部分範囲に分割され得る範囲に言及する。最後に、当業者によって理解されるように、範囲は、各個々のメンバを含む。したがって、例えば、1〜3個のセルを有する群は、1個、2個、または3個のセルを有する群に言及する。同様に、1〜5個のセルを有する群は、1個、2個、3個、4個、または5個のセルを有する群に言及するなどである。
前述から、本開示のさまざまな実施形態が、本明細書で例示のために説明されたことと、本開示の範囲および趣旨から逸脱せずにさまざまな変更を行えることとを了解されたい。したがって、本明細書で開示されたさまざまな実施形態は、限定的であることを意図されたものではなく、真の範囲および趣旨は、次の特許請求の範囲によって示される。

Claims (20)

  1. オブジェクトに取り付けられた材料のシートであって、前記材料は、第1部分および第2部分を有し、前記材料は、前記オブジェクトに関するデータを格納し、前記材料は、電磁放射を反射するように構成される、材料のシートと、
    前記材料に適用されるマスクであって、前記マスクは、前記材料の前記第1部分を覆い隠し、前記材料の前記第2部分を覆い隠さない、マスクと
    を含み、前記第1部分および前記第2部分は、読取装置によって読み取られるデータを格納する
    基準マーカー。
  2. 前記材料は、複数のコーナーキューブを含む、請求項1に記載の基準マーカー。
  3. 前記材料は、少なくとも1つのフォトニック結晶を含む、請求項1に記載の基準マーカー。
  4. 前記フォトニック結晶は、多次元フォトニック結晶を含む、請求項3に記載の基準マーカー。
  5. 前記材料の前記第1部分および前記材料の前記第2部分は、読取装置によって読み取られる時に前記読取装置にデータを伝えるように配置され、前記読取装置によって放たれた光は、前記材料に格納されたデータを前記装置によって読み取ることができるように、前記マスクに従って前記装置に戻る方へ反射される、請求項1に記載の基準マーカー。
  6. 材料の前記第1部分および前記第2部分は、前記オブジェクトの記述、前記オブジェクトのスケーリングの基準、前記オブジェクトを第2オブジェクトに相関させるもの、前記基準マーカーのロケーションを第2の基準マーカーと比較する時に相対スケールを提供するもの、前記装置がネットワークを介してコンピュータ生成されたコンテンツにアクセスすることを可能にするURL(uniform resource locator)のうちの少なくとも1つであるデータを格納する、請求項1に記載の基準マーカー。
  7. 前記電磁放射は、光を含み、前記材料の前記第2部分は、前記光を前記光の源に戻る方へ反射する再帰反射器を含む、請求項1に記載の基準マーカー。
  8. コンピュータ生成されたイメージを用いて実世界イメージを拡張する方法であって、
    実世界オブジェクト上に配置された基準マーカーに向かって光ビームを放つことと、
    前記基準マーカーから反射された光ビームを読み取ることであって、前記反射された光ビームは、前記基準マーカーによって格納されたデータを含む、読み取ることと、
    前記データを使用してコンピュータ生成されたコンテンツを生成することと、
    拡張されたイメージをデバイスのディスプレイ上に表示することであって、前記拡張されたイメージは、前記コンピュータ生成されたコンテンツおよび前記実世界オブジェクトのビューを含む、表示することと
    を含む方法。
  9. 前記光ビームは、レーザビームを含み、前記レーザビームを用いて前記基準マーカーをスキャンすることをさらに含む、請求項8に記載の方法。
  10. 前記基準マーカーは、前記データを格納するように配置されかつ前記反射された光ビームを生成するように配置された複数の再帰反射器を含む、請求項8に記載の方法。
  11. 前記データは、URL(uniform resource locator)を含み、前記コンピュータ生成されたコンテンツについて前記URLを使用してサーバにアクセスすることをさらに含む、請求項8に記載の方法。
  12. 前記基準マーカーから反射された光ビームを読み取ることは、前記格納されたデータを抽出するために前記反射された光ビームから生成された信号を復調することをさらに含む、請求項8に記載の方法。
  13. 前記コンピュータ生成されたコンテンツを生成するために前記装置の追加コンポーネントを使用することをさらに含み、前記追加コンポーネントは、全地球測位センサおよびコンパスを含む、請求項8に記載の方法。
  14. 前記基準マーカーは、アレイに配置された複数のコーナーキューブを含み、
    前記複数のコーナーキューブの一部は、前記複数のコーナーキューブの前記アレイが前記光ビームによって読み取ることができるデータを格納するように、覆い隠されるか、または
    前記アレイの一部は、前記複数のコーナーキューブおよびコーナーキューブがない前記アレイの前記一部が前記光ビームによって読み取られるために配置されるように、コーナーキューブがない
    状態である、請求項8に記載の方法。
  15. 前記基準マーカーは、反射部分および反射性がより低い、または非反射性である部分を形成するためにその上にマスクを形成されたフォトニック結晶を含み、前記反射部分および前記反射性がより低い、または非反射性である部分は、前記データを格納するために配置される、請求項8に記載の方法。
  16. 環境内のオブジェクトに取り付けられた材料であって、前記材料は、
    装置から受け取られた電磁放射を前記装置に向かって戻す方へ反射するように構成された再帰反射器を有する第1部分と、
    反射性がより低い、または非反射性である第2部分であって、前記第1部分および前記第2部分は、データを格納するためにパターンを形成するように配置される、第2部分と
    を含む、材料
    を含み、前記材料によって反射された電磁放射は、前記パターンに従って変調され、前記反射された電磁放射は、前記第1部分および前記第2部分に向かって前記電磁放射を放つ読取装置によって検出され、読み取られるように構成される
    基準マーカー。
  17. 前記再帰反射器は、アレイに配置された複数のコーナーキューブ、またはフォトニック結晶のうちの少なくとも1つを含む、請求項16に記載の基準マーカー。
  18. 前記第2部分は、前記材料に前記複数のコーナーキューブの一部にまたは前記フォトニック結晶に適用されるマスクを含む、請求項17に記載の基準マーカー。
  19. 前記第2部分は、再帰反射器がない、請求項17に記載の基準マーカー。
  20. 前記データは、
    前記オブジェクトの記述、
    前記読取装置がネットワークを介して前記読取装置上に表示される拡張されたイメージに含めるためのコンピュータ生成されたコンテンツにアクセスすることを可能にするURL(uniform resource locator)、または
    前記コンピュータ生成されたコンテンツを生成するのに使用されるもの
    のうちの少なくとも1つである、請求項16に記載の基準マーカー。
JP2013516559A 2010-07-29 2010-07-29 拡張現実用の基準マーカー Expired - Fee Related JP5635689B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2010/043633 WO2012015405A2 (en) 2010-07-29 2010-07-29 Fiducial markers for augmented reality

Publications (2)

Publication Number Publication Date
JP2013539088A true JP2013539088A (ja) 2013-10-17
JP5635689B2 JP5635689B2 (ja) 2014-12-03

Family

ID=45530648

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013516559A Expired - Fee Related JP5635689B2 (ja) 2010-07-29 2010-07-29 拡張現実用の基準マーカー

Country Status (4)

Country Link
JP (1) JP5635689B2 (ja)
KR (1) KR101399248B1 (ja)
CN (1) CN103329120A (ja)
WO (1) WO2012015405A2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020122604A1 (en) * 2018-12-13 2020-06-18 Samsung Electronics Co., Ltd. Electronic device and method for displaying web content in augmented reality mode

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3084353A1 (en) * 2013-12-18 2016-10-26 Basf Se Target device for use in optical detection of an object
US9947140B2 (en) * 2015-09-15 2018-04-17 Sartorius Stedim Biotech Gmbh Connection method, visualization system and computer program product
CN106199216B (zh) * 2016-08-02 2019-05-03 海信集团有限公司 辐射值显示方法及装置
KR101997770B1 (ko) * 2017-12-06 2019-07-08 한국광기술원 증강현실 이미지 생성장치 및 방법
US10969600B2 (en) * 2018-03-08 2021-04-06 Apple Inc. Electronic devices with optical markers
CN113066099B (zh) * 2019-12-13 2023-12-19 视云融聚(广州)科技有限公司 一种基于球形坐标系的摄像机标签轨迹跟随方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001513905A (ja) * 1997-02-24 2001-09-04 アニヴィジョン インコーポレイテッド コンピュータ生成効果のライブ画像上へのオーバレイを操作するための方法及び装置
US6542083B1 (en) * 1999-11-23 2003-04-01 Xerox Corporation Electronic tag position detection using radio broadcast
US20020183882A1 (en) * 2000-10-20 2002-12-05 Michael Dearing RF point of sale and delivery method and system using communication with remote computer and having features to read a large number of RF tags
GB2379295A (en) 2001-08-31 2003-03-05 Sony Uk Ltd A system for distributing audio/video material to a potential buyer
GB2418028B (en) * 2003-05-07 2007-08-01 Qinetiq Ltd Dynamic optical reflector and interrogation system
US7015492B2 (en) * 2003-08-15 2006-03-21 Asm International N.V. Method and apparatus for mapping of wafers located inside a closed wafer cassette
US7295220B2 (en) * 2004-05-28 2007-11-13 National University Of Singapore Interactive system and method
US20060050929A1 (en) * 2004-09-09 2006-03-09 Rast Rodger H Visual vector display generation of very fast moving elements
WO2006099317A2 (en) * 2005-03-11 2006-09-21 Stephen Mcgrew Retro-emissive markings
US7769236B2 (en) * 2005-10-31 2010-08-03 National Research Council Of Canada Marker and method for detecting said marker
US20080138604A1 (en) * 2006-05-02 2008-06-12 John Kenney Authenticating and identifying objects using markings formed with correlated random patterns
US20080266323A1 (en) * 2007-04-25 2008-10-30 Board Of Trustees Of Michigan State University Augmented reality user interaction system
KR101522842B1 (ko) * 2008-07-10 2015-06-25 인텔렉추얼디스커버리 주식회사 이미지 및 문자를 인식하는 심플 프레임 마커를 구비하는 증강현실 시스템과 그 장치, 및 상기 시스템 또는 상기 장치를 이용한 증강현실 구현방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020122604A1 (en) * 2018-12-13 2020-06-18 Samsung Electronics Co., Ltd. Electronic device and method for displaying web content in augmented reality mode
US11194881B2 (en) 2018-12-13 2021-12-07 Samsung Electronics Co., Ltd. Electronic device and method for displaying web content in augmented reality mode

Also Published As

Publication number Publication date
WO2012015405A2 (en) 2012-02-02
CN103329120A (zh) 2013-09-25
JP5635689B2 (ja) 2014-12-03
KR101399248B1 (ko) 2014-05-27
KR20120135527A (ko) 2012-12-14
WO2012015405A3 (en) 2014-03-20

Similar Documents

Publication Publication Date Title
US8434674B2 (en) Fiducial markers for augmented reality
JP5635689B2 (ja) 拡張現実用の基準マーカー
US10061392B2 (en) Control system for navigating a principal dimension of a data space
KR101616591B1 (ko) 데이터의 공간의 주요 치수를 항해하기 위한 제어 시스템
TWI486844B (zh) 光學觸控掃描裝置
US9471148B2 (en) Control system for navigating a principal dimension of a data space
EP1512989A2 (en) Method and system for optically tracking a target using a triangulation technique
Stahs et al. Fast and robust range data acquisition in a low-cost environment
US20060027658A1 (en) Object localization
JP6310101B2 (ja) 複数の3dコードのレーダベース解釈
US20100060576A1 (en) Control System for Navigating a Principal Dimension of a Data Space
US9471864B2 (en) Encoding data in depth patterns
Sadeghi-Niaraki et al. A survey of marker-less tracking and registration techniques for health & environmental applications to augmented reality and ubiquitous geospatial information systems
JP2009020813A (ja) タグおよびそれを用いた物品認識システム
Werner Review of implementation of augmented reality into the georeferenced analogue and digital maps and images
CN102375621B (zh) 光学导航设备
Trivedi et al. A Systematic Review of Tools Available in the Field of Augmented Reality
Agrawal et al. A review: Augmented reality and its working
Alaba et al. Multi-sensor fusion 3D object detection for autonomous driving
TW201303674A (zh) 輸入裝置
Phan et al. Grid Localization Method for Spatial Touchless Interaction Applied in Wearable Devices
US20220171188A1 (en) Eye tracking using a light directing mechanism
Sawal Camera localization under visible light positioning
Zhou et al. An efficient indoor visible light communication positioning method based on tilt single image sensor using single LED
Lindell et al. Efficient non-line-of-sight imaging with computational single-photon imaging

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131211

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140203

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140327

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140519

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140924

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141016

R150 Certificate of patent or registration of utility model

Ref document number: 5635689

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees