JP2015513734A - 相互作用に基づいた認証を介したコンテンツの活性化のシステムおよび方法 - Google Patents

Abstract

マルチモーダル認証およびコンテンツ配信のシステム、方法、ならびに使用事例が示される。コンテンツの消費者は、多数のオブジェクトのマルチモーダル・デジタル表示を取得することができ、この場合、デジタル表示から導出された特徴の並置を使用して、少なくとも一部のオブジェクトが有効な認証オブジェクトであることを認識できる。認証の際に、認証エージェントは、対応する並置に関連したコンテンツに対してコンテンツのアクセスレベルを決定する。次いでコンテンツを電子機器上に、恐らく安全な仮想マシン内にコンテンツのアクセスレベルに従って表示することができる。【選択図】図１

Description

本出願は、２０１２年２月２４日に出願された米国特許仮出願第６１／６０３０４９号の優先権を主張する。

本発明の分野は、コンテンツ配信技術である。

以下の記載には、本発明の理解に有益であり得る情報が含まれる。本明細書に提供されたいかなる情報も、先行技術もしくは主張された本発明に関係がある、または具体的にもしくは黙示的に参照されたいかなる公報も先行技術であるとは認めるものではない。

ネットワークを経て電子機器に配信されるコンテンツの量は、飽くことのないコンテンツの必要性を満足させるために、コンテンツの消費者の検索によって駆動されるにつれて驚くべき速さで増加し続ける。残念ながら、コンテンツの消費者は、彼らが望むコンテンツに対する権利をいつも与えられるわけではない。さらに、コンテンツのプロバイダは、プロバイダの権利が確実に保護される手法でコンテンツの配信を制御しないことが多い。コンテンツの需要とコンテンツの権利との間の矛盾により、消費者およびプロバイダに不満をもたらす。必要なのは、コンテンツを常に表示できる一方で、そのコンテンツを有効な認証の際のみ人に配信可能な基礎構造である。興味深いことに、日常的なオブジェクト、または相互に関連したオブジェクトをキーとして使用して、コンテンツのプロバイダの権利を保護し、コンテンツを即座に得られる満足に対する消費者の需要を満たす、制御された手法でコンテンツを活性化することができることをさらに理解しなければならない。またさらに、日常的なオブジェクトを使用して、異なるレベルのコンテンツにアクセスでき、これはより動的なオブジェクトの相互作用を生じることができることを理解しなければならない。

一部の取組みは、銘柄をテレビの社会形態にリンクするように向けられてきた。例えば、Ｓｅｃｏｎｄ Ｓｃｒｅｅｎ Ｎｅｔｗｏｒｋｓ（商標）（ＵＲＬ、www.secondscreen.com参照）は、対応するコンテンツがテレビに現れているときに、プロバイダが広告をユーザのセカンドスクリーン（例えば、携帯電話）に送信できる。しかし、このような手法は、テレビから離れているあらゆる時点でコンテンツに対する消費者に需要に対処できない。さらに、Ｓｅｃｏｎｄ Ｓｃｒｅｅｎの手法は、かつて現れたコンテンツの普及した層にアクセスを提供するより、むしろ消費者がシステムを選択することを求める。

追加の取組みは、認証システムの一部として人の身元を明らかにするための基礎として、生体認証技法の使用に向けられてきた。例えば、Ｍｕｒａｋａｍｉらによる２０１０年９月３日に「生体認証システム（Ｂｉｏｍｅｔｒｉｃ Ａｕｔｈｅｎｔｉｃａｔｉｏｎ Ｓｙｓｔｅｍ）」という名称で出願された欧州特許出願明細書第２３４８４５８号は、生体認証に基づいてユーザの身元を決定するために生体特徴を使用することを説明している。加えて、Ｍａｔｓｕｙａｍａらによる２０１１年６月１６日に「確認デバイス、確認方法、および記憶媒体（Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ Ｄｅｂｉｃｅ，Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ Ｍｅｔｈｏｄ，ａｎｄ Ｓｔｏｒａｇｅ Ｍｅｄｉｕｍ）」という名称で出願された米国特許出願公開第２０１１／０３１１１１２号は、人の顔の画像フレームから摘出した特徴データに基づいて人を同定することを開示している。次フレームにおける特定の特徴データが同定されなかった際は、特徴データは、次フレームの顔領域に関連付けられる。またさらにＷｅｃｈｓｌｅｒらによる２０１０年６月１日に「部品による認識、ブースティング、および変換を用いた顔認証（Ｆａｃｅ Ａｕｔｈｅｎｔｉｃａｔｉｏｎ Ｕｓｉｎｇ Ｒｅｃｏｇｎｉｔｉｏｎ−ｂｙ−Ｐａｒｔｓ，Ｂｏｏｓｔｉｎｇ，ａｎｄ Ｔｒａｎｓｄｕｃｔｉｏｎ）」という名称で出願された米国特許第８，１９４，９３８号は、人の顔の取得された画像「パッチ」を、パッチをＳＩＦＴまたはガボールウェーブレット（Ｇａｂｏｒ ｗａｖｅｌｅｔ）を介して摘出できる公知のパッチに比較することを通して、人の顔を認証することを説明している。興味深いことに、開示された技法はそれぞれ、生体特徴の演繹的理解を必要とし、オブジェクトを無制しないクラスに対する使用に適さない。

それでも、生体特徴の演繹的に公知のクラスを単に同定することを超える、オブジェクトの異なるクラスを同定すること、または認識することに関した少なくとも最小パスフォワードを提供する技法が利用可能である。例えば、Ｙｏｋｏｎｏによる２００２年５月２４日に「物体認識装置および方法ならびにロボット装置（Ｏｂｊｅｃｔ Ｒｅｃｏｇｎｉｔｉｏｎ Ｄｅｖｉｃｅ，Ｏｂｊｅｃｔ Ｒｅｃｏｇｎｉｔｉｏｎ Ｍｅｔｈｏｄ，ａｎｄ Ｒｏｂｏｔ Ｅｑｕｉｐｍｅｎｔ）」（ｅｎ）という名称で出願された日本特許要約第４１６４７３７号は、未知の物体を撮像装置に対して所定の位置に置くことにより、ロボットが未知の物体を認識するために学習をする、ロボットのための学習システムを説明している。加えて、Ｍａｔｓｕｇｉらによる２００４年１月１５日に「動作認識装置および方法、動物体認識装置および方法、機器制御装置および方法、ならびにプログラム（Ｂｅｈａｖｉｏｒ Ｒｅｃｏｇｎｉｔｉｏｎ Ｄｅｖｉｃｅ ａｎｄ Ｍｅｔｈｏｄ，Ａｎｉｍａｌ Ｏｂｊｅｃｔ Ｒｅｃｏｇｎｉｔｉｏｎ Ｄｅｖｉｃｅ ａｎｄ Ｍｅｔｈｏｄ，Ｅｑｕｉｐｍｅｎｔ Ｃｏｎｔｒｏｌ Ｄｅｖｉｃｅ ａｎｄ Ｍｅｔｈｏｄ，ａｎｄ Ｐｒｏｇｒａｍ）」（ｅｎ）という名称で出願された日本特許要約第２００５２０２６５３号は、原始的特徴に基づいて物体を認識することを検討している。原始的特徴は、出力動作カテゴリを生成するために、ある期間に亘って観察できる。

画像に基づいた認識には、すべてがＢｏｎｃｙｋらによる、２００１年９月５日に「画像取得および同定のシステムならびにプロセス（Ｉｍａｇｅ Ｃａｐｔｕｒｅ ａｎｄ Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ Ｓｙｓｔｅｍ ａｎｄ Ｐｒｏｃｅｓｓ）」という名称で出願された共同所有の米国特許第７０１６５３２号、２００５年８月１５日に「インターネットおよび他の検索エンジンのための検索基準としての画像から導出される情報の使用（Ｕｓｅ ｏｆ Ｉｍａｇｅ−Ｄｅｒｉｖｅｄ Ｉｎｆｏｒｍａｔｉｏｎ ａｓ Ｓｅａｒｃｈ Ｃｒｉｔｅｒｉａ ｆｏｒ Ｉｎｔｅｒｎｅｔ ａｎｄ ｏｔｈｅｒ Ｓｅａｒｃｈ Ｅｎｇｉｎｅｓ）」という名称で出願された米国特許７６８０３２４号、２００６年１月２６日に「画像取得および同定のシステムならびにプロセス（Ｉｍａｇｅ Ｃａｐｔｕｒｅ ａｎｄ Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ Ｓｙｓｔｅｍ ａｎｄ Ｐｒｏｃｅｓｓ）」という名称で出願された米国特許第７５６５００８号、ならびに２００４年３月２２日に「データ取得および同定のシステムならびにプロセス（Ｄａｔａ Ｃａｐｔｕｒｅ ａｎｄ Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ Ｓｙｓｔｅｍ ａｎｄ Ｐｒｏｃｅｓｓ）」という名称で出願された米国特許第７４７７７８０号が含まれる。Ｂｏｎｃｙｋは、オブジェクトの画像データからの特徴パラメータを計算すること、次いでデータベース内の公知のオブジェクトの画像を調べるためにパラメータを使用することを説明している。

上の参考文献により、少なくとも一部のレベルでは、オブジェクトを認識または同定が可能になるが、データ取得の異なる形に基づいて異なるアクセスレベルに従って、ユーザを認証すること、またはコンテンツへのアクセスを許可することに対処できない。

他の働きは、ユーザを認証するために異なるデータ取得技法を使用する方向に向けられてきた。例えば、Ａｖｎｉらによる２００１年１２月４日に「オブジェクトマップに基づいたウェブ署名認識システムのためのシステムおよび方法（Ｓｙｓｔｅｍ ｆｏｒ ａｎｄ Ｍｅｔｈｏｄ ｏｆ Ｗｅｂ Ｓｉｇｎａｔｕｒｅ Ｒｅｃｏｇｎｉｔｉｏｎ Ｓｙｓｔｅｍ Ｂａｓｅｄ ｏｎ Ｏｂｊｅｃｔ Ｍａｐ）」という名称で出願された米国特許第６，６８７，３９０号は、カーソルを背景グラフィック画像上で操作するために、ユーザがポインティング・デバイスをコンピュータ上でどのように動かすかに基づいて、ユーザの同定を認証することを開示している。

一層さらなる働きは、対象物を偽物ではないと認証する方向に向けられてきた。Ｋａｉｓｈらによる１９９８年６月６日に「品物の認証のためのシステムおよび方法（Ｓｙｓｔｅｍ ａｎｄ Ｍｅｔｈｏｄ ｆｏｒ Ａｕｔｈｅｎｔｉｃａｔｉｏｎ ｏｆ Ｇｏｏｄｓ）」という名称で出願された米国特許第５，９７４，１５０号は、製品を偽物よりむしろ本物であると認証するために、媒体（例えば、紙）における不規則なパターンに配置された複数の要素（例えば、通時的繊維）の位置を使用することを説明している。Ｋａｉｓｈと同様に、Ｆｒａｓｅｒによる２００９年４月２１日に「認証方法およびシステム（Ａｕｔｈｅｎｔｉｃａｔｉｏｎ Ｍｅｔｈｏｄ ａｎｄ Ｓｙｓｔｅｍ）」という名称で出願された米国特許第７，９９５，１９６号も、基板上の要素（例えば、繊維）のセットの物理的分散パターンに基づいて、オブジェクトを認証するための技法の提供を試みた。Ｇｅｒｉｇｋらによる２０１０年１１月１９日に「オブジェクトを同定し認証するための方法および装置（Ｍｅｔｈｏｄ ａｎｄ Ｄｅｖｉｃｅ ｆｏｒ Ｉｄｅｎｔｉｆｙｉｎｇ ａｎｄ Ａｕｔｈｅｎｔｉｃａｔｉｎｇ Ｏｂｊｅｃｔｓ）」という名称で出願された米国特許第８，２４５，９２２号も、オブジェクトの認証を説明している。Ｇｅｒｉｇｋは、コード領域内のコードでのオブジェクトを符号化することを説明しており、これは電波放射を散乱させる。これらの参考文献はそれ自体が認証に関する有用性を提供するが、これらは、コンテンツが異なるアクセスレベルを有することができることを理解できない。

コンテンツにアクセスを提供する技法の一例には、Ｌｏｇｈｍａｎｉらによる２００２年１０月２９日に「マルチモーダル音声対応コンテンツのアクセスおよび送達システム（Ｍｕｌｔｉ−Ｍｏｄａｌ Ｖｏｉｃｅ−Ｅｎａｂｌｅ Ｃｏｎｔｅｎｔ Ａｃｃｅｓｓ ａｎｄ Ｄｅｌｉｖｅｒｙ Ｓｙｓｔｅｍ）」という名称で出願された米国特許第７，２８３，９７３号が含まれる。Ｌｏｇｈｍａｎｉは、ユーザが電話を通じてコンテンツにアクセスできる、音声認識またはＤＴＭＦトーンの使用を説明している。コンテンツへのアクセスの認証を許可する方向へのさらなる進展は、ｄｅ Ｊｏｎｇによる２００３年１０月１５日に「デジタルコンテンツのアクセス制御のためのライトロッカー（Ｒｉｇｈｔｓ Ｌｏｃｋｅｒ ｆｏｒ Ｄｉｇｉｔａｌ Ｃｏｎｔｅｎｔ Ａｃｃｅｓｓ Ｃｏｎｔｒｏｌ）」という名称で出願された米国特許第７，３８０，２８０号に説明されている。ｄｅ Ｊｏｎｇは、コンテンツへのアクセスを制限するためにトークン管理システムの手法の使用を提案している。一層さらに、Ｊｏｈｎらによる２００７年６月４日に「コンテンツへのアクセスを制御する方法および装置（Ｍｅｔｈｏｄ ａｎｄ Ａｐｐａｒａｔｕｓ ｔｏ Ｃｏｎｔｒｏｌ Ａｃｃｅｓｓ ｔｏ Ｃｏｎｔｅｎｔ）」という名称で出願された米国特許第７，９５３，０７９号は、コンテンツがタイプによって、恐らく音声認識、テキスト認識、または画像処理ツールの使用を通して分類された、コンテンツのアクセス方針に基づいてコンテンツにアクセスを提供することを説明している。さらになお、Ｒｏｂｅｒｔｓらによる２００９年６月３０日に「ユーザの相互作用に基づいたメディアコンテンツの表示を制御するための方法およびシステム（Ｍｅｔｈｏｄｓ ａｎｄ Ｓｙｓｔｅｍｓ ｆｏｒ Ｃｏｎｔｒｏｌｌｉｎｇ Ｐｒｅｓｅｎｔａｔｉｏｎ ｏｆ Ｍｅｄｉａ Ｃｏｎｔｅｎｔ Ｂａｓｅｄ ｏｎ Ｕｓｅｒ Ｉｎｔｅｒａｃｔｉｏｎ）」という名称で出願された米国特許出願公報は、ユーザがメディアコンテンツと能動的または受動的に相互作用しているかどうかを判定するためにユーザを監視することを論じている。コンテンツは、相互作用プロファイルに基づいてユーザに表示される。

上に論じられた参考文献はこれまで、ユーザがオブジェクトを認証キーとして利用できることを通して、安全性を増加させることができていない。しかし、Ｆｏｎｄｅｕｒらによる２０１１年１１月２９日に「同定の認証を可能にするための方法、および関連検証システム（Ｍｅｔｈｏｄ ｆｏｒ Ｅｎａｂｌｉｎｇ Ａｕｔｈｅｎｔｉｃａｔｉｏｎ ｏｆ Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ，ａｎｄ Ｒｅｌａｔｅｄ Ｖｅｒｉｆｉｃａｔｉｏｎ Ｓｙｓｔｅｍｓ）」という名称で出願された国際特許出願要約第２０１２／０８５３７８号は、オブジェクトの画像を使用して人をシステムに登録した場合に、その人により秘密に選択されたオブジェクトの画像を取得することを説明している。Ｆｏｎｄｕｅｒは、ユーザ登録のためのオブジェクトの画像を使用することを企図するに過ぎず、認証に対して異なる様式の使用は提供していない。それでも、Ｂｒｏｗｎによる２００９年１２月２８日に「安全なアプリケーションのための認証トークンの仮想化（Ｖｉｒｔｕａｌｉｚａｔｉｏｎ ｏｆ Ａｕｔｈｅｎｔｉｃａｔｉｏｎ Ｔｏｋｅｎ ｆｏｒ Ｓｅｃｕｒｅ Ａｐｐｌｉｃａｔｉｏｎｓ）」という名称で出願された米国特許出願第２０１１／０１６１２３２号は、一層さらに進歩を遂げている。Ｂｒｏｗｎは、認証の「所有物」のタイプの一部として、物理的キー（例えば、車のキー、家のキーなど）または他の物理的トークンの画像を収集することを検討している。Ｂｒｏｗｎは、物理的トークンの画像が、声紋、すなわち「本人」認証要因と組み合わせて、より強力な多要因の認証プロトコルを生成できることを説明している。残念ながら、Ｂｒｏｗｎのシステムは、関連配置に関係なく多数のキーの使用を単に説明しているに過ぎない。

本明細書に記載されたすべての公報は、個々の公報または特許出願が参照によって組み込まれるように具体的に個別に示されるかのように、同程度に参照によって組み込まれる。組み込まれた参照における用語の定義または使用が、本明細書に提供されたその用語の定義に矛盾する、または反対である場合は、本明細書に提供されたその用語の定義を適用し、参照におけるその用語の定義を適用しない。

一部の実施形態では、本発明のある特定の実施形態を説明し主張するために使用される、成分の量、濃度などの性質、および反応条件などを表す数は、用語「約（ａｂｏｕｔ）」により場合によって修正されると理解されるべきである。したがって、一部の実施形態では、本明細書および添付の特許請求の範囲に説明された数値パラメータは、特定の実施形態によって得ようとされた、所望の性質に依存して変化することができる概算である。一部の実施形態では、数値パラメータは、記録された有効桁の数を踏まえ、また通常の丸め技術の適用によって解釈されるべきである。本発明の一部の実施形態の広範囲に亘って説明される数値範囲およびパラメータが概算であるにもかかわらず、具体例に説明された数値は、実行可能であるくらい正確に記録されている。本発明の一部の実施形態に表された数値は、それぞれの試験測定結果で見出された標準偏差からやむを得ずもたらされる一定の誤差を含んでもよい。

本明細書の記載および続く特許請求の範囲を通して使用される場合、「ａ」、「ａｎ」、および「ｔｈｅ」の意味には、文脈が明確にそうでないと指定しない限り複数の指示対象が含まれる。また、本明細書の記載に使用される場合、「ｉｎ」の意味には、文脈が明確にそうでないと指定しない限り「ｉｎ」および「ｏｎ」が含まれる。

本明細書の数値範囲の列挙は、単にその範囲内に該当するそれぞれの値を個別に言及する略記法としての役割を果たすことのみを意図する。本明細書で特に指摘しない限り、それぞれの値は、本明細書に個別に列挙されるかのように、本明細書に組み込まれる。本明細書で説明されるすべての方法は、本明細書で特に指摘されるか、または明らかに文脈と矛盾しない限り、あらゆる適切な順番で行うことができる。本明細書のある特定の実施形態に関して提供されたありとあらゆる例または例示的な言い回し（たとえば「など」）の使用は、特に主張しない限り、単に本発明をよりよく説明することだけを意図し、本発明の範囲に対する制限を設けるものではない。本明細書のいかなる言い回しも、本発明の実施に不可欠である、特許請求の範囲に記載されていない要素を示すものと解釈されるべきではない。

本明細書に開示された本発明の代替要素または実施形態の分類は、限定と解釈されるべきではない。各群の要素は、その群の他の要素もしくは本明細書に見出される他の要素を指すことができ、個々に、またはその群の他の要素もしくは本明細書に見出される他の要素とのあらゆる組合せで主張することができる。群の１つまたは複数の要素を、利便性および／または特許性の理由で群に含む、または群から削除することができる。こうしたあらゆる含有または削除が生じた際は、本明細書は、修正されたとして該群を含むと本明細書ではみなされ、従って添付の特許請求の範囲に使用されたすべてのマーカッシュ群の明細書を満たす。

より理想的なシステムは、単に安全なトークンとしてのオブジェクトの存在より、むしろ相互に対するオブジェクトの並置に基づいて、様々なレベルのコンテンツにアクセスするために実体を認証するまたは許可することを提供するはずである。このような手法は、出願者の研究において以下に記載するように、否定論拠、きめ細かいアクセスもしくは制御、または他のアクセスレベル特徴を供給することによって有利である一方で、コンテンツのプロバイダが自身のコンテンツを通して制御を保持できる。

したがって、コンテンツの活性化および認証のシステムならびに方法が依然として必要とされている。

本発明の主題は、環境または場面にある実物を、コンテンツへのアクセスを得るために認証オブジェクトとみなすことができるという認識に基づいて、コンテンツを活性化できる装置、システムおよび方法を提供する。本発明の主題の一態様には、コンテンツを活性化する方法が含まれる。電子機器は、コンテンツにアクセスを許可できる認証エージェントにアクセスできる。一部の実施形態では、電子機器は、恐らく認証エージェントとして作動する認識エンジンへの少なくとも１つの対象物との相互作用（例えば、対話、撮像、作動、プレー、検知、監視など）のデジタル表示、恐らくマルチモーダル表示を獲得する。該方法は、環境内の少なくとも２つのオブジェクトをデジタル表示に基づいて有効な認証オブジェクトとして区別することをさらに含むことができ、この場合、有効な認証オブジェクトを、認証に関係のない他のオブジェクトから区別することができる。該方法は、有効な認証オブジェクトに関する認証特徴セットを導出することをさらに含むことができ、この場合、認証特徴を対象物のデジタル表示から決定できる。例示的認証特徴は、画像もしくは音声データ、スケール不変特徴量変化（Ｓｃａｌｅ Ｉｎｖａｒｉａｎｔ Ｆｅａｔｕｒｅ Ｔｒａｎｓｆｏｒｍ）（ＳＩＦＴ）特徴、音響署名、場所、時間、またはデジタル表示に関連した他の側面から計算されたハッシュコードを含むことができる。該方法の別のステップは、恐らく認証エージェントにより、相互作用空間において互いに対して認証特徴セットの並置の機能としてコンテンツのアクセスレベルを確立することを含み、この場合、並置の特性を索引としてコンテンツまたはアクセスレベルのデータベースの中に使用できる。次いで、認証エージェントは、電子機器がコンテンツをコンテンツのアクセスレベルに従って表示する、またはレンダリングするように構成することにより、対象物に関連したコンテンツを活性化することができる。

本発明の主題の別の態様は、認証オブジェクトのデータベース、認識プラットフォーム、および認証エージェントを含む、コンテンツの配信システムを含む。好ましくは、認証オブジェクトのデータベースは、多数の認証要素を記憶し、この場合、各要素は、認証キーとして個人が使用できる現実または仮想のオブジェクトを表すことができる。例えば、個人が、観葉植物を自分の認証要素として登録することができる。各認証要素は、好ましくは、それによって要素が認証に使用できる有効な特徴とみなされる１つまたは複数の認証特徴、例えば、アクションフィギュア玩具の正面に対するアクションフィギュア玩具の背面を含む。認識プラットフォームは、１つまたは複数のオブジェクトを有する場面のデジタル表示を獲得あるいは入手する。プラットフォームは、デジタル表示を分析して、１つまたは複数のオブジェクトの特徴の導出を通してオブジェクトを同定する。プラットフォームは、要素の認証特徴へのオブジェクトの特徴の比較に基づいて、ユーザに関連した認証要素としてその場面における少なくとも１つのオブジェクトを認識するようにさらに構成される。認証エージェントは、その場面に表示する認証特徴を使用して、コンテンツのアクセスレベルを抽出でき、コンテンツのアクセスレベルを使用して、電子機器上に表示することができるコンテンツを許可できる。

本発明の主題のさらに別の態様は、製品情報を得るための方法を含む。該方法は、恐らく、検索エンジン、オンライン小売店、または他のサービスとして作動する、認識サーバへのアクセスを提供することを含むことができる。認識サーバは、ビデオストリームから取得したビデオフレームを獲得することができる。例えば、個人が、テレビ番組、コマーシャル、または映画の静止画像を取得することができ、この場合、静止画像は取得されたビデオフレームを表示する。認識サーバを、フレームに関連した特徴を導出するように構成し、それからフレームを特徴に基づいて取得した少なくとも１つの発信ビデオストリームを同定するように構成することがさらに可能である。一旦ビデオストリームが同定されると、該方法は、製品のデータベースから同定されたビデオストリームに関連した製品情報を獲得することをさらに含むことができる。製品情報を電子機器上に提示することができる。

本発明の主題の様々なオブジェクト、特徴、側面および利点は、同様の番号が同様の構成要素を表す添付の図面と共に、好ましい実施形態の以下の詳述からより明らかになろう。

マルチモーダル・トランスメディア認証およびコンテンツ配信のエコシステムの概略図である。 環境内の認証オブジェクトを他のオブジェクトと区別する認識プラットフォームの概略図である。 認証特徴のセットを導出するために、オブジェクトのデジタル表示の分析を示す図である。 相互作用空間における認証特徴のセットの並置を示す図である。 認証特徴のセットの並置に基づいて、コンテンツのアクセスレベルの決定を示す図である。 活性化しているコンテンツのための方法の概略図である。

以下の記載はコンピュータ／サーバに基づいた認証またはコンテンツ配信システムから描いているが、様々な代替構成も適切であると考えられ、サーバ、インターフェイス、システム、データベース、エージェント、ピア、エンジン、制御装置、または個別にもしくは集合的に作動する他のタイプのコンピューティングデバイスを含む、様々なコンピューティングデバイスを利用してもよいことに留意されたい。コンピューティングデバイスは、有形の持続性コンピュータ可読記憶媒体（例えば、ハードドライブ、半導体ドライブ、ＲＡＭ、フラッシュ、ＲＯＭなど）上に記憶された、ソフトウェア命令を実行するように構成された処理装置を備えることを理解されたい。ソフトウェア命令は、コンピューティングデバイスが、好ましくは、役割、責任、または開示された装置に関して以下に論じるような他の機能を提供するように構成する。特に好ましい実施形態では、様々なサーバ、システム、データベース、またはインターフェイスは、標準プロトコルまたはアルゴリズムを使用して、恐らくＨＴＴＰ、ＨＴＴＰＳ、ＡＥＳ、公開秘密鍵交換、ウェブサービスＡＰＩ、公知の金融取引プロトコル、または他の電子情報の交換方法に基づいて、データを交換する。データ交換は、好ましくは、パケット交換ネットワーク、インターネット、ＬＡＮ、ＷＡＮ、ＶＰＮ、または他のタイプのパケット交換ネットワークを通して行われる。

開示された教示は、１つまたは複数のコンテンツの活性化信号を電子機器に発信することを含む、多くの有利な技術的効果を提供することを理解されたい。活性化信号は、電子機器が活性化されたコンテンツを示すことができるように構成する。例えば、電子機器は、ネットワークを経て活性化信号を受信し、それに応答して電子機器は、コンテンツのアクセスレベルに従ってコンテンツをユーザに提示する権限を与えられる仮想マシンのインスタンスを作成する。

以下の検討は、本発明の主題の多くの例示的実施形態を提供する。各実施形態は、発明の要素の単一の組合せを表すが、本発明の主題は、開示された要素のすべての可能な組合せを含むと考えられる。したがって、１つの実施形態が要素Ａ、Ｂ、およびＣを含み、第２の実施形態が要素ＢおよびＤを含む場合は、本発明の主題は、明確に開示されていないとしても、Ａ、Ｂ、Ｃ、またはＤの他の残りの組合せも含むと考えられる。

本明細書で使用される場合、かつ文脈がそうでないと指定しない限り、用語「に結合された（ｃｏｕｐｌｅｄ ｔｏ）」は、直接結合（互いに結合された２つの要素が互いに接触する）および間接結合（少なくとも１つの追加要素は２つの要素間に配置される）の両方を含むことが意図される。したがって、用語「に結合された（ｃｏｕｐｌｅｄ ｔｏ）」および「と結合された（ｃｏｕｐｌｅｄ ｗｉｔｈ）」は同義に用いられる。この文献で論じたようなネットワーキング状況内で、用語「に結合された（ｃｏｕｐｌｅｄ ｔｏ）」および「と結合された（ｃｏｕｐｌｅｄ ｗｉｔｈ）」は、「と連通して結合された（ｃｏｍｍｕｎｉｃａｔｉｖｅｌｙ ｃｏｕｐｌｅｄ ｗｉｔｈ）」を意味することもできる。

概観
図１は、認証およびコンテンツ配信のエコシステムを示す。示された例では、コンテンツは、場面１００を伴うマルチモーダル相互作用１０５の機能としてユーザまたはデバイスを認証することに基づいて活性化される。一部の実施形態では、マルチモーダル相互作用１０５は、１つまたは複数の現実世界のオブジェクト１２０Ａまたは１２０Ｂの画像を電子機器１１０（例えば、携帯電話、車両など）から示したように撮ることを含み、この場合、電子機器１１０も出力装置として作動できる。例示的電子機器には、携帯電話、タブレット型コンピュータ、コンピュータ、ゲーム機、車両、キオスク、自動販売機、ロボット、電子装置、医療機器、安全システム、または他の装置が含まれる。マルチモーダル相互作用１０５は、広範囲の相互作用およびマルチモーダルデータを網羅することができることを理解されたい。環境との例示的相互作用は、運動、ウォーキング、買い物、購買、撮像、環境データの収集、監視、視聴、再生、操作、または他のタイプの相互作用を含むことができる。相互作用データは、異なる様式のデータを取得する１つまたは複数のセンサから獲得することができる。例示的様式には、ビデオデータ、音響データ、運動データ、場所データ、時間データ、圧力データ、温度データ、ニュースデータ、または他のタイプのデータが含まれる。環境に関連したセンサデータは、電子機器１１０、例えば、携帯電話内のセンサ（例えば、加速度計、磁気計、コンパス、マイクロフォン、ＧＰＳ、ラジオなど）を介して、または他の異なる装置もしくは遠隔装置（例えば、防犯カメラ、情報源など）内のセンサを介して獲得することができる。

以下の検討は、物理的環境内の１つまたは複数の対象物１２０Ａ〜１２０Ｂのデジタル表示として画像データを取得する、電子機器１１０、例えば、携帯電話に関する本発明の主題を説明する。以下に開示された教示は、音声、動画ビデオ、生体データ、場所データ、またはセンサを介して取得できる、あるいはデータ源から獲得できる他のデータを含む、他の様式のデータに容易に適合することができることを理解されたい。加えて、示された例は、現実世界の対象物１２０Ａおよび１２０Ｂに焦点を合わせる。しかし、認証オブジェクトはまた、コンピューティングシステム上にレンダリングされた仮想オブジェクト、例えば、オンラインゲーム世界における仮想オブジェクト、拡張された現実のオブジェクト、または他のタイプの仮想オブジェクトを含むこともできる。

示したよう例では、電子機器１１０は、植物（すなわち、オブジェクト１２０Ａ）および運転免許証（すなわち、オブジェクト１２０Ｂ）として表されたドキュメントを備える、場面１００との相互作用１０５を反映する画像としてデジタル表示１４１を取得する。植物および運転免許証は、キーとして使用してコンテンツ１９３を解除できる、またはコンテンツ１９３を経て制御するためにアクセスを獲得できる、例示的現実世界のオブジェクトを表す。相互作用１０５は、画像ならびにより複雑な相互作用を取得することを含むことができるに過ぎない。例示的相互作用１０５は、園芸、歯科医院での予約に行くこと、日曜大工店での買い物、または他のタイプのマルチモーダル相互作用を含むことができる。各相互作用１０５を、センサデータ署名を相互作用データベース（図示せず）内の公知の相互作用と比較することにより、またはユーザが選択したタイプの相互作用を通して決定できる。

電子機器１１０は、画像または他のデジタル表示１４１を獲得し、必要に応じてデータを処理することができる。デジタル表示１４１は、生のセンサデータ、処理されたセンサデータ（例えば、画像ファイル）、分析されたセンサデータ（例えば、低減されたデータセット）、またはデジタル表示１４１から導出した他の情報を含むことができることを理解されたい。次いでデジタル表示１４１を、デジタル表示１４１を受信あるいは獲得するように構成された認識プラットフォーム１４０に示すことができる。デジタル表示１４１を、ネットワーク（例えば、ＷＡＮ、ＬＡＮ、インターネット、携帯電話など）を経て公知のプロトコル（例えば、ＨＴＴＰ、ＦＴＰ、ＳＳＬ、ＳＳＨなど）または他の独自のプロトコルを使用して認識プラットフォーム１４１に送信することができる。一部の実施形態では、電子機器１１０は、認識プラットフォーム１４１を含む。さらに、開示されたシステムの各要素は、エコシステムを跨いで配信されることが可能な役割または責任を有することを理解されたい。例えば、認証エージェント１８０を、電子機器１１０内に配置することができ、または手数料を取って認証サービスを提供する遠隔サーバとして作動することができる。一層さらに、単一の要素の役割および責任を、エコシステム内の多数の装置を跨いで配信することができる。例えば、コンテンツデータベース１９５は、電子機器１１０内、認識プラットフォーム１４０内、または場合によって遠隔の第三者サービス（例えば、検索エンジン、ショッピングサイトなど）においても、配置された一部を有することができる。

認識プラットフォーム１４０は、デジタル表示１４１を受信し、デジタル表示１４１に表された場面または環境１００におけるオブジェクト１２０Ａまたは１２０Ｂ、例えば、植物および運転免許証を同定しようとする。認識プラットフォーム１４０は、デジタル表示１４１を分析して、オブジェクト１２０Ａまたは１２０Ｂに関する１つまたは複数の特徴１６０を抽出できる。一部の実施形態では、特徴１６０は、オブジェクト１２０Ａまたは１２０Ｂに関連したオブジェクト特性を含むことができる。また、特徴１６０は、デジタル表示１４１のデータから導出した特性を含むことができることも企図される。画像に関して、特徴１６０は、スケール不変特徴量変化（Ｓｃａｌｅ Ｉｎｖａｒｉａｎｔ Ｆｅａｔｕｒｅ Ｔｒａｎｓｆｏｒｍ）（ＳＩＦＴ）、バイナリロバスト不変性スケーラブルキーポイント（Ｂｉｎａｒｙ Ｒｏｂｕｓｔ Ｉｎｖａｒｉａｎｔ Ｓｃａｌａｂｌｅ Ｋｅｙｐｏｉｎｔｓ）（ＢＲＩＳＫ）、高速ロバスト特徴（Ｓｐｅｅｄｅｄ Ｕｐ Ｒｏｂｕｓｔ Ｆｅａｔｕｒｅｓ）（ＳＵＲＦ）、または画像データから導出した他のタイプの特徴を含むことができる。一部の実施形態では、特徴１６０は、画像の少なくとも一部、またはデジタル表示１４１の一部から、場合によっては他の様式からも計算したハッシュ値を含むことができる。許容可能なハッシュは、知覚ハッシュを含むことができ、この場合、知覚ハッシュ値は類似コンテンツ（ＵＲＬ、www.phash.org参照）と同じである、る。例示的知覚ハッシュには、固定長のＭＨ画像ハッシュ、離散コサイン変換（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）（ＤＣＴ）の可変長のビデオハッシュ、ＤＣＴ画像ハッシュ、ラジアル画像ハッシュ、ヒストグラムに基づいた画像ハッシュ、またはバーク音響ハッシュが含まれる。また特徴１６０は、自動音声認識（Ａｕｔｏｍａｔｉｃ Ｓｐｅｅｃｈ Ｒｅｃｏｇｎｉｔｉｏｎ）（ＡＳＲ）を通して生成された単語もしくは用語、生体値（例えば、呼吸、心拍、血圧、顔の特徴など）、場所情報（例えば、ＧＰＳ、三角測量、慣性移動、非ＧＰＳのイリジウムデータなど）、または多くの様式から導出した他の特性も含むことができる。

また特徴１６０は、デジタル表示に表されたような相互作用データの様式に依存することができる。追加の例示的オブジェクトの特徴１６０は、時間、場所、ニュース事象、天候条件、温度、圧力、生体署名、音声もしくは音響信号、または他のタイプの様式に関する情報を含むことができる。オブジェクトの特徴１６０のタイプ、またはオブジェクトの特徴１６０がどのように生成したかに関わらず、認識プラットフォーム１４０は、オブジェクトの特徴１６０を使用して、現実世界のオブジェクト１２０Ａまたは１２０Ｂの性質を決定できる。一部の実施形態では、認識プラットフォームは、オブジェクトの特徴に基づいてオブジェクトのデータベースを検索することにより、オブジェクト１２０Ａおよび１２０Ｂを認識する。オブジェクトを認識するための適切な技法は、共同所有の米国特許第７，０１６，５３２号、第７，４７７，７８０号、第７，６８０，３２４号、第７，４０３，６５２号、第７，５６５，００８号、第７，８９９，２４３号、第７，８８１，５２９号、第７，８９９，２５２号、および同家族の他の特許に論じられている。

認識プラットフォーム１４０は、オブジェクトの特徴１６０を認証エージェント１８０に提供することができる。認証エージェント１８０は、オブジェクトの特徴１６０または他のオブジェクト情報を使用して、現実世界のオブジェクト１２０Ａまたは１２０Ｂを、オブジェクトをデジタル表示１４１によって表されたようなその場面の他のオブジェクトと区別することにより、真に有効な認証オブジェクトであるかどうかを判定することができる。オブジェクトの特徴１６０または追加情報を使用して、有効な認証オブジェクトと考えられるオブジェクトに対して、認証オブジェクトのデータベース１５０を検索するクエリを構築することができる。認証エージェント１８０は、クエリを使用して、クエリを満足させるオブジェクトの特徴を有する公知の認証オブジェクトの結果セットを獲得できる。したがって、データベース検索を使用して、オブジェクトが有効な認証オブジェクトであるかどうかを判定するために、デジタル表示１４１に表示されたオブジェクトの中から区別できる。示した例では、植物もしくは運転免許証（または両方）を、相互作用１０５の１つまたは複数の性質に関して実際に有効な認証オブジェクトとして、認証エージェント１８０によって有効にすることができる。例えば、植物および運転免許証は、ユーザアカウント情報から判定された特定のユーザ、登録された認証オブジェクト、装置識別子から判定されたようなユーザの特定の電子機器、現在のＧＰＳ座標もしくは場所データにおいて、または特定の期間に対してのみ有効であってもよい。すべてのこれらの要因その他を利用して、現実世界のオブジェクト１２０Ａまたは１２０Ｂが、コンテンツを活性化するための真に有効な認証オブジェクトであるかどうかを判定させることができる。先に述べたように、仮想オブジェクトも同様の技法を通して有効な認証オブジェクトを表すことができる。

有効な認証オブジェクトは、多種多様なオブジェクトを含むことができる。例示的二次元オブジェクトは、印刷媒体（例えば、運転免許証、パスポート、署名、小切手、文書、ポスター、掲示板、写真、レンダリングした画像、本、新聞、雑誌など）、陰影、表示画面上にレンダリングした画像（例えば、コンピュータ表示画面、テレビ、ゲームシステム、電子掲示板、映画画面、キオスク、自動販売機、医療表示画面など）、レンダリングした仮想オブジェクト、クレジットカード、または他のほぼ平坦なオブジェクトを含むことができる。有効な認証オブジェクトとして使用可能な例示的三次元オブジェクトは、人、顔、動物、衣服の物品、車両、建物、玩具、植物、コンピューティングデバイス、建造物、食品、置物、模型、ロボット、工具、または標準の幅、奥行き、もしくは長さを有する他の対象物を含むことができる。一層さらに、有効な認証オブジェクトは、一時的な側面も含むことができる。経時的に変化する例示的オブジェクトには、話した言葉、ビデオ、音楽、身振り、装置の連動した動き（例えば、玩具、ロボットなど）、または経時的に変化する他のオブジェクトが含まれる。

一旦認証エージェント１８０が、２つ以上の対象物１２０Ａまたは１２０Ｂが有効な認証オブジェクトに対応すると判定すると、認証エージェント１８０は、特徴１６０の並置、認証特徴、または他の利用可能な情報に基づいて、１つまたは複数のコンテンツのアクセスレベル１８３を決定できる。アクセスレベル１８３は、現在の相互作用１０５を活性化するコンテンツ１９３の範囲、コンテンツを跨ぐ制御の範囲、または環境１００におけるコンテンツ１９３との将来起こり得る相互作用の範囲を決定する。アクセスレベル１８３を、ルックアップテーブルに基づいて導出することができるか、または特徴１６０が、コンテンツのアクセスレベル１８３にマッピングされた際立った認証特徴にどの程度良好に整合するかに基づいて計算することができる。例えば、運転免許証が植物の正面にある場合は、コンテンツ１９３の全構成を活性化することができる。運転免許証が植物の背後にある場合は、最小のコンテンツ１９３が活性化されてもよい。このような手法により、コンテンツの発行元は、発信元のコンテンツ１９３がどのように、またはどの範囲を配信できるかを決定できる。さらに、オブジェクト１２０Ｂに対するオブジェクト１２０Ａの配置は、コンテンツ１９３にどのようにアクセスするかを制御できる。前例を踏まえて、運転免許証が植物の正面にさらに動かされ、その結果、運転免許証が画像のより大きい部分を占めると、コンテンツ１９３に早送りを指示することができる。運転免許証が植物の背後に動かされた場合は、コンテンツ１９３に巻き戻しを指示することができる。このような場合、オブジェクト１２０Ａとオブジェクト１２０Ｂとの間の相互作用空間内で導出された距離を使用して、再生速度を制御できる。

コンテンツのアクセスレベル１８３またはアクセスレベル１８３に関する情報を、コンテンツデータベース１９５内のコンテンツ１９３の１つまたは複数の部分を記憶する、コンテンツのサーバ１９０に提供することができる。アクセスレベルの情報は、どのコンテンツ１９３またはコンテンツ１９３の範囲を電子機器１１０もしくは他の出力装置のユーザに表示されるべきかをコンテンツのサーバ１９０に知らせる。したがって、同定されたコンテンツ１９３は、ユーザにより消費のために活性化される。出力装置は、電子機器１１０、電化製品、プリンタ、ロボット、機械、車両、またはコンテンツを表示可能なタイプの装置を含むことができる。

一部の実施形態では、コンテンツのサーバ１９０は、信号または命令を電子機器１１０または他の出力装置に送信して、仮想マシン１１２のインスタンスを作成できる。示した例では、仮想マシン１１２は、出力装置（すなわち、電子機器１１０）の外部にボックスとして婉曲的に表示される。しかし、仮想マシン１１２のインスタンスは、電子機器１１０の記憶装置または処理装置内に作成されることが、当業者には理解されるはずである。仮想マシン１１２は、アクセスレベル１８３によって決定された１つまたは複数の規則に従って、コンテンツのサーバ１９０、認証エージェント１８０、またはコンテンツのプロバイダの制御下にあることが可能である。次いでコンテンツのサーバ１９０は、出力電子機器１１０上のコンテンツ１９３を表示するように仮想マシン１１２に命令することができる。コンテンツのサーバ１９０またはインフラストラクチャの他の要素が仮想マシン１１２またはその機能を確実に制御することにより、コンテンツのプロバイダの権利は保護されたままである一方で、またコンテンツの消費者が有効な認証オブジェクトを認識することを介して、オンデマンドでコンテンツ１９３を獲得することもできる。仮想マシン１１２のインスタンスの作成、およびコンテンツの表示の制御に適切な技法は、Ｗｉｓｅにより２００２年６月１０日に「遠隔の仮想医療診断画像ビューア（Ｒｅｍｏｔｅ Ｖｉｒｔｕａｌ Ｍｅｄｉｃａｌ Ｄｉａｇｎｏｓｔｉｃ Ｉｍａｇｉｎｇ Ｖｉｅｗｅｒ）」という名称で出願した米国特許第７，１８１，６１７号、Ｗｉｓｅにより２００７年１月１９日に「遠隔データビューア（Ｒｅｍｏｔｅ Ｄａｔａ Ｖｉｅｗｅｒ）」という名称で出願した米国特許第７，６８５，４１７号、Ｗｉｓｅにより２００８年４月１６日に「ファイルアクセス管理システム（Ｆｉｌｅ Ａｃｃｅｓｓ Ｍａｎａｇｅｍｅｎｔ Ｓｙｓｔｅｍ）」という名称で出願した米国特許出願公報第２００８／０２６３０４８号、およびＷｉｓｅにより２０１０年３月１２日に「遠隔データビューア（Ｒｅｍｏｔｅ Ｄａｔａ Ｖｉｅｗｅｒ）」という名称で出願した米国特許出願公報第２０１０／０１６９６４２号に説明されている。

本発明の主題は、認証オブジェクトの特徴１６０から決定された性質をもつ仮想マシン１１２のインスタンスの作成または起動を含むと考えられる。このような特徴は、消費者のアクセスを表示された、またはレンダリングされたコンテンツ１９３に決定づけることができる。例えば、現実世外のオブジェクトの互いに対する並置は、コンテンツの消費者がコンテンツをタイムシフト（例えば、早送り、巻き戻し、一時停止など）できる方法で、仮想マシン１１２のインスタンスの作成を引き起こす可能性がある。

図２は、環境２００内の認証オブジェクト２２０と非認証オブジェクト２３０との間の区別のより詳細な概観を提供する。個人は、環境２００と相互作用するために機器２１０を利用し、環境２００は多くのオブジェクトを含むことができる。環境内のオブジェクトは、１つまたは複数の認証オブジェクト２２０または非認証オブジェクト２３０を含むことができる。機器２１０は、データ、恐らくマルチモーダルデータを含むデジタル表示２４１を獲得し、これは環境２００の側面を表す。機器２１０は、通信リンク２１５を経てデジタル表示２４１を認識プラットフォーム２４０に送信する。通信リンク２１５は、認識プラットフォーム２４０が機器２１０から遠位にあるときにネットワーク（例えば、無線、有線、インターネット、ＰＡＮ、ＶＰＮ、ＷＡＮなど）を含むことができ、または認識プラットフォーム２４０が機器２１０内に配置されている場合は、内部接続（例えば、バス、共有メモリ、レジスタ、ＡＰＩなど）を含むことができる。認識プラットフォーム２４０を認証エージェント、コンテンツのサーバ、機器２１０、遠隔サービス、または他のコンピューティングプラットフォームと結合することができることに留意されたい。現在の検討のために、認識プラットフォーム２４０は、認証エージェントを含むとみなすべきである。

認識プラットフォーム２４０は、デジタル表示２４１上に１つまたは複数の分析技術を適用して、デジタル表示２４１から特徴２４３を生成する。一部の実施形態では、特徴２４３は、環境２００の特徴よりむしろデジタル表示２４１自体の性質とみなすことができる。例えば、画像データを分析して、恐らく記述子（例えば、カラーバランス、ヒストグラム、ウェーブレット、ＳＩＦＴ特徴、ＢＲＩＳＫキーポイント、ＦＵＲＦ記述子、ＯＲＢ記述子など）、動作データ（例えば、ｖＳＬＡＭ、ＧＰＳなど）から導出された動き記述子、音響パラメータ（例えば、振幅、位相、周波数など）、または他のタイプの特徴２４３を含む、画像特徴を生成できる。次いでこのような特徴を識別子２４７により使用して、認証オブジェクト２２０を非認証オブジェクト２３０と区別することができる。

一部の実施形態では、識別子２４７は、クエリを受信し、クエリを公知のオブジェクト・データベース２５０に提示する、検索エンジンとして作動することができる。クエリに応答して、公知のオブジェクト・データベース２５０は、クエリを満たす特性を有する、認証オブジェクトに関する認証情報の結果セットを返信する。公知のオブジェクト・データベース２５０を、恐らく特徴２４３が付着する一般的な名前空間に従ってインデックスを付けた、認証オブジェクト情報を記憶するように構成できる。一般的な名前空間は、可能な相互作用空間を説明する手法で画定されたスキーマとみなすことができる。相互作用空間は、多次元空間とみなすことができ、この場合、各次元がセンサデータの可能な形または様式を表すことができる。相互作用空間を、場所情報（例えば、座標、Ｘ、Ｙ、またはＺ、経度、緯度など）、時間情報、配向情報、生体情報、または他の相互作用空間情報に関して画定することができる。したがって、認証オブジェクト情報を、ＳＩＦＴ特徴または特徴のクラスタ、音響署名、センサ署名、場所もしくは位置座標、配向署名、生体署名、ユーザのプロファイル情報、または相互作用空間内の他の側面に基づいて記憶または検索することができる。

識別子２４７は、公知のオブジェクト・データベース２５０から結果セットを受信し、返信した認証オブジェクト情報を調べることにより環境２００内のオブジェクトの中から区別する。識別子２４７は、特徴２４３またはシステムもしくはデジタル表示２４１を通して利用可能な他の情報を、結果セット内の認証オブジェクト情報と比べて、あらゆる公知のオブジェクトを同定する。公知のオブジェクトが見出され、相互作用に対して有効な認証オブジェクト２４９とみなされた場合は、認識プラットフォーム２４０は、それぞれの有効な認証オブジェクト２４９に対して１つまたは複数のセットの認証特徴２６０を導出する。

より具体的な例として、機器２１０が環境２００の画像を取得するシナリオを検討する。環境２００は図２に示されたように多数のオブジェクトを有する。デジタル表示２４１は、恐らく他の様式の中でとりわけ画像データを含むはずである。しかし、検討のために、この例は画像データに焦点を合わせる。認識プラットフォーム２４０は、画像データを分析し、その画像データについて多数のＳＩＦＴまたはＢＲＩＳＫ画像記述子を生成できる。次いで記述子を識別子２４７に通過させることができ、識別子２４７は、次いで画像記述子の機能としてクエリを生成し、クエリを公知のオブジェクト・データベース２５０に提示する。クエリは、他の情報と共に実際の画像記述子を含むことができる。公知のオブジェクト・データベース２５０は、同様の画像記述子を有するとみなされる、演繹的公知の撮像されたオブジェクトに関連した公知のオブジェクト情報のセットを、クエリによる要求に応じて少なくとも信頼レベル内に返信できる。例えば、公知のオブジェクト・データベース２５０は、まさに認証オブジェクト２２０に関連した情報を返信できるか、または認証オブジェクト２２０を超える追加オブジェクト、例えば、非認証オブジェクト２３０に関連した情報を返信できる。この手法を使用して、オブジェクトがすでに公知であるか、または公知のオブジェクト・データベース２５０に登録されている場合、環境２００内のあらゆるオブジェクトを基本的に認識できることを理解されたい。この手法が有利なのは、独自のデータベースを有するより、むしろ既存のまたは第三者のオブジェクト・データベースを利用できるからである。例示的第三者のオブジェクト・データベースは、Ｇｏｏｇｌｅ（登録商標）Ｇｏｇｇｌｅｓ（商標）、ｉｎ８（商標）Ｍｏｂｉｌｅ’ｓ ｉＤ（ＵＲＬ、www.in8.com/#big-id参照）、Ａｍａｚｏｎ、または他の第三者のオブジェクト・データベースを含む。

前例を踏まえて、識別子２４７は、返信されたオブジェクト情報を調べ、画像データに基づいてオブジェクトのどの画像データが本当に有効な認証オブジェクト２９０であるかを判別する。例えば、環境２００内のすべてのオブジェクトが結果セットに表示された場合、認証オブジェクト２２０に関連した情報にメタデータ、またはオブジェクトが実際に有効な認証オブジェクト２４９であることを示す他のタイプのデータのタグを付けることができる。有効な認証オブジェクト２４９は、認証オブジェクト２２０、認証オブジェクト２２０の一部、または画像データ以外の他のオブジェクト、例えば声紋から同定された人を含むことを理解されたい。

オブジェクトをどのように区別するかに関わらず、例を続ける、認識プラットフォーム２４０は、１つまたは複数の認証特徴のセット２６０を特徴２４３および有効な認証オブジェクト２４０から導出する。画像データおよび表された例に関して、認証特徴のセット２６０は、植物に対応する第１の認証特徴のセット、および運転免許証（例えば、文書）に対応する第２の認証特徴のセットを含むことができる。

図３は、認証特徴３６０のセットを生成できる、可能な分析のサブセットを示す。例では、認証特徴３６０のセットは、植物のオブジェクト３４９Ａに対応するセット３６０Ａ、文書のオブジェクト３４９Ｂに対応するセット３６０Ｂ、および音響のオブジェクト３４９Ｃに対応するセット３６０Ｃを含む。オブジェクト３４９Ａ〜３４９Ｃのそれぞれを、デジタル表示３４１内の１つまたは複数のデータ様式を介して表示することができる。例えば、デジタル表示３４１は、オブジェクト３４９Ａおよび３４９Ｂを表示する画像データ（例えば、ＪＰＧ、ＰＮＧ、ＢＭＰ、静止画像、ビデオなど）を含むことができる。さらに、デジタル表示３４１は、環境に関連した音声を表す音響データ（例えば、ＷＡＶ、ＭＰ３、録音など）を含むことができる。

デジタル表示３４１内のデータの各様式を、その様式に関連した１つまたは複数の分析技術３４３に従って分析することができる。画像データを以下から、すなわち、ＳＩＦＴ、ＢＲＩＳＫ、ＳＵＲＦ、ＳＬＡＭ、ｖＳＬＡＭ、ウェーブレット、光学文字認識（ＯＣＲ）、または他の技法のうちの１つまたは複数を含む技法を恐らく使用して分析して、特徴セット３６０Ａまたは３６０Ａを生成することができる。特徴セット３６０Ａまたは３６０Ｂは、生の導出された特徴（例えば、画像データ内もしくは相互作用空間内の特定の場所の記述子）または間接的もしくは推測された特徴を含むことができることを理解されたい。間接的または推測された特徴は、ＯＣＲを画像データに適用することから獲得されたテキスト、またはオブジェクトのルックアップに基づいたメタデータもしくはタグを含むことができる。例えば、特徴セット３６０Ａは、植物のオブジェクト３４９Ａのタイプ、属性、または種のような情報が画像データ内にテキスト形式で表されていなくとも、植物のオブジェクト３４９Ａのタイプ、属性、または種の名を付けたタグを含んでもよい。さらに特徴セット３６０Ｃは、自動音声認識（ＡＳＲ）技術によって再構築され、時間に関して記録されたような語句のみを含んでもよい。認証特徴３６０のそれぞれのセットは、多数の特徴を有して示される。認証特徴３６０のセットは、特徴を生成するために使用される技法に依存して、１個、３個、７個、１０個、またはそれ以上の特徴を含むことができることを理解されたい。例えば、画像に基づく特徴セットは、１００個を超える、場合によっては１０００個も超える特徴を含むことができる。認証特徴のセットはシンボルデータ（例えば、テキスト、英数字、バーコード、ＱＲコード（登録商標）、マトリックスコード、カラーコードなど）を含むことができるが、特徴のセットは、有効な認証オブジェクトに関連したシンボリックタグから導出された情報を欠く可能性があることが企図される。例えば、特徴のセットは、有効な認証オブジェクトに関連したいかなるバーコードデータも欠く可能性がある一方で、依然としてコンテンツの活性化に有益である。

認証特徴のセット３６０は、図３内に明確に個別に管理されたオブジェクトとして表されている。セット３６０のそれぞれを個々に使用して、オブジェクト３４９Ａ〜３４９Ｃをそれぞれ同定または認証することができる。さらにセット３６０を組み合わせて、ユーザまたは要求された相互作用を同定または認証するためにトークンまたはキーの集合を生成できる。一層さらに本明細書に開示されたように、相互作用空間内で互いに対するセット３６０の並置は、豊富な認証、許可、コマンド、制御、またはコンテンツを活性化できる管理システムを生じる。

図４は、集合的に認証特徴セット４６０を指す、多数の認証特徴セット４６０Ａ、４６０Ｂ、および４６０Ｃから並置オブジェクト４７０を導出することを示す。先に述べたように、認証特徴セット４６０は、相互作用空間４００内に存在する。相互作用空間４００は、物理的空間（すなわち、Ｘ、Ｙ、軸）として示され、検討のために時間成分（すなわち、ｔ軸）を有して示されている。相互作用空間４６０は、恐らく導出された意図、コンテンツ、デモグラフィック、または相互作用に関する他の側面を含む他の次元を有することができることを理解されたい。相互作用空間４００内の各点をベクトルまたはＮ組によって表すことができる。

認証特徴セット４６０はそれぞれ、相互作用空間内に存在するとみなすことができる。例えば、セット４６０Ａは、撮像された植物のオブジェクト（図３のセット３６０Ａ参照）から導出された１つまたは複数のＳＩＦＴ特徴を表すことができ、この場合、各特徴が示されたように物理的時空内の相対位置に対応する。ＳＩＦＴ特徴の位置を、恐らくＭｃＫｉｎｎｏｎによる２０１２年６月７日に「奥行き推定の決定、システムおよび方法（Ｄｅｐｔｈ Ｅｓｔｉｍａｔｅ Ｄｅｔｅｒｍｉｎａｔｉｏｎ，Ｓｙｓｔｅｍｓ ａｎｄ Ｍｅｔｈｏｄｓ）」という名称で出願された米国特許出願公報第２０１２／０１６３６７２号に開示された技法に基づいた、フィールド計算の奥行きを通して決定することができる。また特徴の位置を、モーションデータが利用可能であるときは、ｖＳＬＡＭの使用から導出することができる。一層さらに、時間に関する位置を、デジタル表示内のタイムスタンプ、観察に基づいたタイムスタンプ、場合によってはデータが届いたときも決定することができる。相互作用行為の空間原点を、取得装置（例えば、ＧＰＳ、慣性移動など）の場所データから、背景に関して取得する装置の位置もしくは配向から、または他の場所に基づく情報から決定することができる。したがって、それぞれの特徴セット４６０Ａ、４６０Ｂ、または４６０Ｃは、相互作用空間４００内の点または場所として存在する。

特徴セット４６０内の特徴のクラスタは、認証オブジェクトに対してそのクラスタを同定することにより１つの群として取り扱うことができる。クラスタを、１つまたは複数のクラスタ技術を介して相互作用空間内で発見するまたは導出することができる。例えば、特徴セット４６０Ａを、Ｋ平均法（すなわち、重心に基づくクラスタリング）、ＥＭクラスタリング（すなわち、分布に基づくクラスタリング）、ＤＢＳＣＡＮ（すなわち、濃度に基づくクラスタリング）、ＣＬＩＱＵＥもしくはＳＵＢＣＬＵ（すなわち、より高次元のデータにおける部分空間のクラスタリング）、または他のタイプのクラスタリング技術の使用を通して見出すことができる。したがって、各クラスタを有効な認証オブジェクトに関連していると同定することができる。さらに、クラスタは、空間を跨ぐ範囲、例えば、「質量」の中心、重心、中心、数、幅、範囲、濃度、長さ、奥行き、継続時間、または他の性質を有することができる。次いでこのような性質を使用して、並置特性を決定することができ、コンテンツのアクセスレベルを決定する際に有利であると考えられる。

特徴セット４６０間の並置を、相互作用空間４００の様々な側面または性質に基づいて決定することができる。示した例では、並置を別の特徴セットに対する特徴セット４６０の１つの相対配向４６１に基づいて決定することができる。一旦特徴セットの好ましい方向が選択されると（すなわち、セットのどの要素がセットの好ましい「頂部」または「上部」と考えられるかを決定する）、その配向は相互作用空間の原点に対する絶対角度に基づいて表すことができる、または１つのセットから別のセットまでの相対角度に基づいて表すことができる。配向４６１を相互作用空間４００に対してオイラー角のセットによって表すことができる。さらに、並置を特徴セット４６０間の相対位置４６３に基づいて決定することができる。相対位置４６３を、相互作用空間の各次元に対応する成分を有するベクトルとして表すことができ、この場合、各成分の値は、ある距離または異なる距離を表す。三次元空間では、特徴セット４６０Ａと４６０Ｃとの間の相対位置４６３を、Ｖ＝｛Ｘ_Ｃ−Ｘ_Ａ，Ｙ_Ｃ−Ｙ_Ａ，Ｚ_Ｃ−Ｚ_Ａ｝と表すことができる。また相対位置を相互作用空間の原点に対する絶対座標に基づいて表すことができる。一層さらに、特徴セット４６０間の並置は相対時間４６５に基づくことが可能である。相対時間４６５を、各特徴セット４６０が起きたとき、または相互作用に対して検出されたときに基づいて表すことができる。また相互作用空間４００の他の次元を使用して、特徴セット４６０間の並置を計算または導出することができることを理解されたい。

並置４７０は、特徴セット４６０Ａ、４６０Ｂ、および４６０Ｃのそれぞれから導出された並置情報４７０Ａ、４７０Ｂ、および４７０Ｃの集合を表す。並置情報は、関心対象の現在の相互作用に関わる並置特性のセットと考えることができる。その特性は同定されたオブジェクトの名前、特徴セットにおける関連特徴の数、オブジェクトまたは特徴のタイプ、特徴セットの重心、相対値もしくは位置、または他の並置特性を含むことができる。

図５は、認証エージェント５８０によりコンテンツ５９３に対する１つまたは複数のアクセスレベル５８３を確立する可能な方法を示す。示した例では、認証エージェント５８０は、アクセスレベルを選択するために使用されるクエリまたは他の基準を生成するための基礎として、１つまたは複数の並置５７０を利用する。例えば、クエリは、対応する認証特徴セット（例えば、位置、クラスタ、群、配向、時間など）に関する並置特性と共に、オブジェクトの識別子（例えば、名前、銘柄、タイプ、ＧＵＩＤ、ＵＵＩＤ、製造番号など）または他のオブジェクト特性を含むことができる。認証エージェント５８０は、クエリを認証データベース５５０に送信することができ、次いで認証データベース５５０は、並置５７０によって解除されたコンテンツ情報を返信する。コンテンツ情報はアクセスレベル５８３を含むことができ、アクセスレベル５８３を使用して１つまたは複数のコンテンツ５９３にアクセスすることができる。

アクセスレベル５８３は、ユーザがコンテンツ５９３と相互作用できる程度または範囲を表す。示されたように、コンテンツ５９３は、コンテンツの性質に依存して、多数のアクセスレベルを含むことができ、この場合、各レベルを並置５７０に基づいて活性化できる。例えば、コンテンツ５９３が携帯電話を介してアクセス可能な拡張現実の販売促進ゲームを含む場合、ゲームへのアクセスレベルを有効な認証オブジェクト、例えば、飲料用缶およびＬａｋｅｒｓ（登録商標）のＮＢＡのポスターの異なる並置によって決定することができる。ユーザが飲料用缶をポスターの周囲またはポスターの特徴（例えば、選手の写真、ロゴなど）に対して位置付けると、ユーザはより高いアクセスを得ることができる。恐らく、Ｐｅｐｓｉ（登録商標）缶をＫｏｂｅ Ｂｒｙａｎｔの右に置くことはアクセスレベル１に対応するはずであり、アクセスレベル１は、ユーザがゲームコンテンツを見学する、または再生できるに過ぎない。ユーザがＣｏｋｅ（登録商標）をＫｏｂｅ Ｂｒｙａｎｔの右に置く場合、恐らくユーザはアクセスレベル２に達し、無料クーポンまたは販売促進を受領するはずである。一層さらに缶を相対位置の中に動かすと、ユーザにコンテンツをタイムシフトする、相互作用を開始するまたは参加する、コンテンツをコピーまたは録音する、コンテンツを編集する、コンテンツを共有する、コンテンツと直接的または間接的に相互作用する、あるいはコンテンツにアクセスする許可をすることにより、より大きな制御を供給することができる。したがって、出力装置は、特に販売促進が有効な認証オブジェクトに関連する際に、コンテンツ５９３としての製品に関連した販売促進を示すことができる。この例は一例として飲料用缶を使用しているが、販売促進は、クーポン、コマーシャル、供給、セール、抽選券、広告、または他のタイプの販売促進を含むことができる。

アクセスレベル５８３は、制御措置に加えて安全措置を表示することができることを理解されたい。ユーザは、互いに対して２つのオブジェクトを位置付け、銀行口座を解除するまたは相互作用を許可するためのトークンとしてシステムを用いて構成を登録することができる。またユーザは、第１の配置に類似してもよい第２の配置も登録できるが、異なるアクセスレベル５８３によりコンテンツを活性化するはずである。例えば、運転免許証を植物の右に置くことにより、人の銀行口座との相互作用を活性化してもよい。しかし、人が脅迫を受けたとすると、その相互作用の活性化をシミュレーションすることが有益であろう。恐らく運転免許証を植物の左に置くことは、偽の相互作用を活性化させることがある一方で、また悪質な活性化の許可を通知する。

コンテンツ５９３は、広範囲のコンテンツの様式またはタイプを含むことができる。コンテンツの例示的タイプは、アプリケーション・ソフトウェアもしくはモジュール、画像データ、ビデオデータ、音響データ、医療記録、ゲームデータ、販売促進データ、商品もしくはサービス情報、仮想もしくは拡張現実データ、コマンド、命令、ロボットの命令もしくはコマンド、または他のタイプのデータを含むことができる。コンテンツのさらなる例は、取引情報、芸能情報、ニュース情報、スポーツ情報、販売促進情報、医療情報、安全情報、ゲーム情報、アプリケーション情報、健康管理情報、職場もしくは作業者情報、または他のタイプの情報を含む。例示的様式は、聴覚、視覚、運動感覚、身振り、嗅覚、触覚、味覚、センサ情報、または他のタイプの様式を含むことができる。一層さらに、コンテンツは、多くのタイプの媒体を含むことができ、トランスメディア・コンテンツと考えることができる。

図６は、開示された技法に基づいたコンテンツを活性化するための方法６００を表す。ステップ６１０は、電子機器が認証エージェントにアクセスできることを含む。一部の実施形態では、ユーザは、電子機器の持続性コンピュータ可読メモリ上にソフトウェア命令をインストールでき、この場合、命令は認証エージェントのサービスを提供するために処理装置上で実行される。認証エージェントは、独立型アプリケーションとして、ライブラリ内のモジュールとして、場合によってはオペレーティングシステムの一体部分としても機能することができる。他の実施形態では、認証エージェントを、ネットワークを通してアクセスでき、この場合、１つまたは複数の遠隔コンピューティングデバイスは、認証エージェントサービスにアクセスを提供する。例えば、認証エージェントは、仮想化されたクラウドベースのシステム（例えば、ＰａａＳ、ＩａａＳ、ＳａａＳなど）のように個別払い型サービスの作動として機能することができる。例示的電子機器は、スマートフォン、車両、電化製品、キオスク、ゲームシステム、自動販売機、医療機器、ＡＴＭ、または他のタイプの電子機器を含むことができる。

ステップ６２０には、物理的または仮想の複数のオブジェクトを含む、環境との相互作用のデジタル表示を獲得する電子機器が含まれる。電子機器は、デジタル表示を１つまたは複数のセンサから獲得することができる。センサを電子機器の内部に存在させる、もしくは電子機器と一体化することができ、または電子機器から遠く離すことができる。例えば、電子機器がスマートフォンを含む実施形態では、センサは、一体型カメラ、加速度計、タッチディスプレイ、マイクロフォン、ＧＰＳセンサ、無線トランシーバ、または他のセンサを含むことができる。遠隔センサは、防犯カメラ、気象センサ、医療センサ、ホール効果プローブ、または電子機器の外部の通信リンクを介してアクセスできる他の検知装置を含むことができる。相互作用は、音響の録音、製品の購入、画像の取得、社会的ネットワークにおけるコンテンツの共有、電子機器の操作、ゲームのプレー、園芸、または検知できる他のタイプの相互作用を含むことができる。

デジタル表示は、多様なセンサから獲得したような環境のデータ表示を含むと考えられる。センサが多種多様のデータ様式を取得できることを考慮すると、該方法はさらにデジタル表示の一部としてマルチモーダルデータを獲得することを含むことができる。例えば、マルチモーダルデータは、画像データ、モーションデータ、音響データ、温度データ、場所データ、位置データ、配向データ、メタデータ、化学データ、医療データ、ユーザデータ、運動データ、生体データ、言語データ、加速度データ、先頭部データ、またはステップ６２５によって提案されたような他のタイプのデータのうちの２つ以上を含むことができる。

ステップ６３０は、デジタル表示に基づいた有効な認証オブジェクトとして、環境内の複数のオブジェクトから少なくとも２つの異なるオブジェクトを区別することを含むことができる。一部の実施形態では、認識プラットフォームは、デジタル表示を分析してデジタル信号を１つまたは複数の特性または性質に変換させ、次いでこれを使用して恐らくデータベース・ルックアップを介して、異なるオブジェクトを同定または認識することができる。認識プラットフォームは、公知のオブジェクトを導出された特性に整合することにより、環境内の多数のオブジェクトを認識することができる。次いで認識されたオブジェクトを、公知のオブジェクト・データベース内、または認証オブジェクトレジストリ内に記憶されたオブジェクト情報を調べることにより、非認証オブジェクトに対して有効な認証オブジェクトであるとして区別することができる。整合が見出され、その整合が有効な認証オブジェクトとして登録されたとき、認識プラットフォームは、整合を有する環境内の少なくとも一部のオブジェクトが本当に有効な認証オブジェクトであると、認証エージェントに通告することができる。認証プラットフォームを電子機器内に配置することができるか、または恐らくネットワークを経て認証エージェントに結合されたリモートサーバ内にも配置できることを理解されたい。

ステップ６４０は、第１の有効な認証オブジェクトに関連した、認証特徴の少なくとも第１のセットをデジタル表示から導出すること、および第２の有効な認証オブジェクトに関連した、認証特徴の第２の異なるセットをデジタル表示から導出することを含む。認証特徴のセットは、デジタル表示の導出された特性または性質を含むことができるか、または間接的もしくは推測された特徴を含むことができる。導出された特性は、画像記述子もしくはキーポイント、音響信号特性、生体信号強度、または他のこうした特徴などの特徴を含むことができる。間接的もしくは推測された特徴を、認識されたオブジェクト、例えば、名前、クラス、銘柄、固有性、メタデータ、または他の性質に関するオブジェクト情報を獲得することを介して獲得できる。さらに、ステップ６４１に提案されたように、認証特徴のセットを導出することは、異なる様式、例えば、画像データおよび音響データの少なくとも２つの特徴を導出することを含むことができる。さらにステップ６４３では、特徴セットを導出することは、画像特徴をデジタル表示における有効な認証オブジェクトに関する画像データ（例えば、ＳＩＦＴ特徴、画像特徴、フィールドの奥行きなど）から導出することを含むことができる。一層さらにステップ６４５は、認証特徴としてハッシュを有効な認証オブジェクトに関連したデジタル表示から計算することを含むことができる。

認証特徴のセットは、必ずしも有効な認証オブジェクトに関連したすべての可能な特徴を表さないことを理解されたい。むしろ、認証特徴は、オブジェクトの一部、例えば、正面、側面、背面、または他の部分に関連した特徴を表すことができるに過ぎない。例えば、認証特徴のセットは、認証オブジェクトのまさに一部の画像データを含むことができる。したがって、単一の認証オブジェクトの位置、配向、向き、または被覆は、コンテンツの活性化に影響を与えることができる。認証特徴は、１個、２個、３個、７個、またはそれ以上のタイプの特徴データを含むことができる。例示的特徴データは、画像データ、モーションデータ、音響データ、温度データ、場所データ、位置データ、配向データ、メタデータ、ユーザデータ、運動データ、生体データ、言語データ、加速度データ、先頭部データ、または他のタイプのデータに基づくことが可能である。

ステップ６５０には、それぞれの有効な認証オブジェクトに関連した認証特徴セットの間の並置を導出することが含まれる。並置は、位置、配列、相対位置、または相互作用空間内の特徴セットの他の構成を説明する並置特性を含む、構築されたまたはインスタンスを作成されたオブジェクトと考えることができる。三次元の物理的空間において、また認証特徴のセットが画像データの特徴（例えば、ＳＩＦＴ特徴、ＢＲＩＳＫキーポイント、ｖＳＬＡＭ座標など）を含む場合、特徴セットは、三次元空間内の範囲または位置を有する、画像特徴のクラスタを含むことができる。したがって、並置は、多数の特徴セットが三次元空間内で互いに対してどのように配置されているかに関する情報を含むことができる。並置特性を、個々の特徴、特徴のクラスタ、または特徴のサブセットの観点から画定することができる。例えば、認証特徴が多数の特徴クラスタを含む場合、並置を、第１のクラスタの重心と第２のクラスタの重心との間の三次元空間における幾何学的距離として記載することができる。相互作用空間は、物理的次元より多い次元によって画定された、多次元空間であることが可能であることを理解されたい。例示的追加次元は、時間、ユーザの層、導出された感情もしくは意図、社会的関係、または他の次元を含むことができる。

並置を相互作用空間内の認証特徴のセットの配置に関して記載できることを鑑み、並置は、相互作用空間内の相対位置に基づいて導出された特性を含むことができることを理解されたい。したがって、ステップ６５１は、デジタル表示内の対応する有効な認証オブジェクトの相対位置から導出された相対位置情報に基づいて、認証特徴のセットの並置を決定することを含むことができる。また相対位置情報を、認証特徴のセットから直接決定することができる。相対位置は、物理的長さ（例えば、インチ、フィート、マイル、センチメートル、メートル、キロメートルなど）、尺度（例えば、感情尺度）間の相対差、または相互作用空間内の他の相対測定であることが可能である。同じように、ステップ６５３は、デジタル表示において対応する有効な認証オブジェクトの相対配向情報に基づいて、または相互作用空間内の認証特徴のセットの相対配向から間接的に、認証特徴のセットの並置を決定することを含むことができる。相対配向情報は、基準点（例えば、カメラ、ユーザ、地理位置など）に対する角度を含むことができるか、または互いに対する特徴セットの向き（例えば、上、下、左、右、面するなど）の観点から表した単純な配向を含むことができる。一層さらに、ステップ６５５は、認証特徴のセットに対する相対時間情報に基づいて並置を決定することを含むことができる。相対時間は、特徴の第１のセットが、特徴の第２のセットの一時的存在に対して現れる、または変化するときを表すことができる。また相対時間情報は、移動情報（例えば、見かけ経路、速度、加速度、加加速度など）、出現時間、消失時間、変化時間（例えば、回転、向きの変化、特徴セットの移動など）、クラスタにおける特徴の移動もしくは変化、または他の時間に関する情報を含むこともできる。

認証特徴のセットまたはコンテンツを引き起こす基準は、地理位置データに依存することができることを理解されたい。地理位置データは、建物内場合によっては建物の外側でも相互作用の場所に影響を与えることができる。例えば、場所データを、ＧＰＳ場合によっては非ＧＰＳ技法も介して獲得できる。例示的非ＧＰＳ技法には、環境内に存在する視覚特徴に対して視覚に基づくマッピング（例えば、ＳＬＡＭ、ｖＳＬＡＭ）を使用することが含まれる。非ＧＰＳ技法の別の例には、建物を貫通できるイリジウム衛星信号（例えば、１６２６．１０４ＭＨｚ、２０．３２ｍＳ ＱＰＳＫバーストなど）を使用することが含まれる。このような非ＧＰＳ地理位置情報を、ユーザ認証またはコンテンツの活性化のために並置特性に組み合わせることができる。

ステップ６６０は、恐らく認証エージェントにより、互いに対して認証特徴のセットの並置の機能としてコンテンツのアクセスレベルを確立することを含むことができる。コンテンツのアクセスレベルを、並置特性をコンテンツがどのようにアクセスされるべきかを管理する設定をした方針または規則に結合された特性に比較することによって決定できる。例えば、一旦コンテンツを関連していると同定すると、そのコンテンツは、関連したアクセス方針を有することができ、この場合、その方針は並列特性の観点から画定されたアクセスレベルの基準を示す。その方針をコンテンツに直接結合することができるか、またはコンテンツから分離することができる。一例として（図５参照）、認証エージェントはアクセスレベルのデータベースと結合することができ、並置特性を使用してそのデータベースを目標とするクエリを生成することができる。そのクエリに応答して、データベースは、アクセスレベルまたはクエリを満たす基準を有する方針を返信することができる。

ステップ６７０は、恐らくコンテンツのアクセスレベルに基づいた認証エージェントを介して、コンテンツを活性化することを含むことができる。活性化は、異なる技法を通して生じることができる。一部の実施形態では、コンテンツまたはコンテンツの一部は目標出力装置（例えば、電子機器）上に演繹的に存在することができ、装置を構築してコンテンツのアクセスレベルに基づいてコンテンツへのアクセス権を認めることができる。他の実施形態では、コンテンツを、コマンドまたは命令を目標出力装置に提供することにより、追加行為を開始することによって活性化することができる。追加行為は、コンテンツのダウンロードを開始するように装置に命令すること、コンテンツを購入するように金融取引を行うこと、コンテンツプレーヤーを起動すること、仮想マシンを起動すること、または他の行為を含むことができる。

コンテンツを活性化することは、ステップ６７５によって提案されたように活性化を引き起こす基準の機能としてコンテンツを活性化することを含むことができる。引き起こす基準を使用して、どのコンテンツが相互作用空間に基づいて実際に利用可能かを指示することができる。例えば、特定のコンテンツは、画定された地理上のフェンス内または画定された期間のみに利用可能であってもよい。したがって、コンテンツは、１）引き起こす基準に基づいて利用可能にされ、２）アクセスレベルに基づいて制御されることが可能である。引き起こす基準を、相互作用空間の特性または次元に基づいて画定することができる。したがって、活性化を引き起こす基準は、絶対時間もしくは相対時間、多数の認証要求もしくは他の認証測定基準、認証特徴の性質（例えば、画像対音声）、認証特徴以外の要因（例えば、コンテンツ、地理上のフェンスなど）、認証特徴を除いた要因（すなわち、認証特徴に依存しない）、または他の要因に依存することができる。

ステップ６８０には、恐らく認証エージェントによりコンテンツのアクセスレベルに従ってコンテンツを表すように出力装置を構成することが含まれる。上に示唆したように、出力装置を、出力装置に１つまたは複数のコマンドを送信することを通して行動を起こすように構成することができる。装置を構成するコマンド、またはコンテンツプレーヤーに関連したコマンドは、コンテンツの性質に依存する。例えば、コンテンツがメディアファイル（例えば、ビデオ、音楽など）を含む際、コマンドは出力装置上の対応するプレーヤーを許可されたアクセスレベルに基づいてコンテンツをタイムシフトすることを制限するまたは可能にすることができる。しかし、コンテンツが三次元プリンタファイルを含む場合、コマンドはプリンタが三次元オブジェクトをファイルからカラーに生成するのを制限するまたは可能にすることができる。

一部の実施形態では、出力装置を構成することは、ステップ６８１によって提案されたように、出力装置が仮想マシンを起動することを命令をすることを含むことができる。仮想マシンは、Ｊａｖａ（登録商標）仮想マシン、．ＮＥＴ（登録商標）仮想マシン、Ｐｙｔｈｏｎ仮想マシン、ＶＭＷａｒｅ（登録商標）仮想マシン、または他の仮想マシンを含むことができる。仮想マシンの使用は、コンテンツをアクセスレベルに基づいてユーザから分離できるので有利であると考えられる。例えば、仮想マシンを起動でき、コンテンツを安全なメモリ（例えば、暗号化されたメモリ、安全な容器、ＦＩＰＳ−１４０など）内に記憶することができる。さらに該方法は、アクセスレベルに従ってコンテンツの権利について仮想マシンを保護するステップ６８３を含むことができる。次いで仮想マシンの制御装置（例えば、コンテンツのプロバイダ）は、ユーザがコンテンツを見ることを可能にする一方で、制御装置のアクセスを確実に制限する。コンテンツのプレーヤー、または仮想マシン内のコンテンツを、安全なトークンによりコンテンツもしくはプレーヤーをロックすることにより、コンテンツを暗号化することにより、またはたの安全対策を適用することにより、保護することができる。さらにステップ６８５は、アクセスレベルに従ってコンテンツへのアクセスを制限する仮想マシンを含むことができる。先に述べたように、表すコンテンツに関してコンテンツのプレーヤーまたは出力装置の特徴をロックさせるように、仮想マシンに命令することができる。

例示
以下の章は、本発明の主題の様々な実施形態を説明する。

認証オブジェクトに基づいたコンテンツの活性化
本発明の主題の一態様は、コンテンツを活性化する方法を含む、認証オブジェクトに基づいたコンテンツの活性化を含む。該方法は、ユーザ、装置、または望ましいコンテンツに関する他のエンティティを認証するように構成された、認証エージェントへのアクセスを提供するステップを含むことができる。アクセスを、電子機器インターフェイスを介して、恐らく携帯電話に接続するインターネットにより提供することができる。一部の実施形態では、認証エージェントを、恐らくエコシステムにおける他の要素と共に、個別払い型サービスとしてコンテンツのプロバイダまたは消費者に供給できる。

該方法は、少なくとも１つの対象物との相互作用のマルチモーダル・デジタル表示を獲得するステップを含むことができる。マルチモーダル・デジタル表示は、先に論じたように様々なタイプのデータを含むことができ、場面または対象物とのエンティティの相互作用に反映することができる。デジタル表示は、電子機器または他のデータ源からのデータを含むことを理解されたい。相互作用は、対象物の画像を撮ること、対象物に近接していること、オブジェクトと物理的に相互作用すること、対象物を監視すること、または他のタイプの相互作用を直接もしくは間接的に含むことができる。マルチモーダル・デジタル表示における例示的様式は、以下のタイプのデータ、すなわち、画像データ、モーションデータ、音響データ、温度データ、場所データ、位置データ、配向データ、メタデータ、ユーザデータ、運動データ、生体データ、言語データ、加速度データ、速度データ、先頭部データ、基本データにおける変化、または他のタイプのデータのうちの１つ、２つ、またはそれ以上を含むことができる。

先に論じたように、対象物は、デジタル表示を分析するために使用されるアルゴリズムがオブジェクト自体に対して曖昧である可能性があるので、ほとんどあらゆるタイプのオブジェクトを含むことができる。むしろ、アルゴリズムは、関連データ内で見出された特徴（例えば、ＳＩＦＴ特徴、音響特徴、センサデータ署名など）を追求する。対象物は、印刷媒体、実質的に三次元のオブジェクト、場合によってはコンピューティングデバイスが表すレンダリングした画像も含む、異なるタイプのオブジェクトを含むことができる。例示的印刷媒体は、運転免許証、署名、ポスター、掲示板、写真、レンダリングした画像、本、新聞、または雑誌を含むことができる。例えば、認証のための基礎として使用できる例示的三次元のオブジェクトには、人、顔、動物、車両、建物、玩具、植物、コンピューティングデバイス、建造物、置物、または他のオブジェクトが含まれる。例示的なレンダリングした画像は、コンピュータ画面、キオスク、電子掲示板、テレビ、映画画面、ゲームシステム、または他のタイプのレンダリングした画像を含むことができる。

また認証特徴は、デジタル表示の様式に基づいて異なる様式を含むことができる。それぞれのタイプの様式を個別にまたは一緒に処理して、より洗練されたまたは複雑な認証スキームを生成することができる。より好ましい実施形態では、認証特徴は、少なくとも２つの異なる様式、例えば、画像データおよび音響データを含む。特に企図された認証特徴は、認証オブジェクトに関連した画像データ、または認証オブジェクトの少なくとも一部を含む。一部の実施形態では、認証特徴は、画像のハッシュ値、恐らく知覚ハッシュを含むことができる。

さらに該方法は、対象物を相互作用に関連した他のオブジェクトから認識することを含み、この場合、対象物は、有効な認証オブジェクトとして同定される。対象物を、オブジェクトの特徴を含むマルチモーダル・デジタル表示から導出された情報に基づいて同定することができる。対象物を、デジタル表示から導出された特徴に類似したオブジェクトの特徴をもつ認証オブジェクトを有する、認証オブジェクトのデータベースを検索することによって認識できる。

さらに該方法は、認証オブジェクトに関係する複数の認証特徴を導出することを含むことができ、この場合、認証特徴は、認証を行うための定量化された値またはパラメータと考えることができる。例えば、認証特徴は、キー、恐らくＳＩＦＴ特徴、音響特徴、ハッシュ値、画像もしくは画像データの特徴、画像もしくは音響からのフィールド情報の奥行き、またはデジタル表示もしくは認証オブジェクトに関連した情報から導出することができる他のタイプのデータを含むと考えることができる。

対象物と得られるデジタル表示との相互作用は、図１に示されたように、多数の認証オブジェクトとの相互作用を含むことができることを理解されたい。ある場面の多数のオブジェクトが認証オブジェクトと考えられるシナリオでは、認証特徴を、互いに対してオブジェクトの並置または配置から導出することができる。認証特徴は、対象物の配置に関連した相対位置情報を含むことができるか、または対象物に関連した相対配向情報を含むことができる。例えば、認証オブジェクトが運転免許証およびコーヒーマグを含む場合、運転免許証に対するコーヒーマグの柄の配向は、所望のアクセスレベルを示してもよい。柄が免許証の反対を向いている場合、恐らく最小コンテンツが活性化されてもよい。柄が免許証の方を向いている場合、恐らくコンテンツ全体が活性化されてもよい。

認証は、コンテンツを活性化できる前に、１つまたは複数の認証特徴が申し分なく存在するか、場合によっては存在しないことも要求することができる。一部のシナリオでは、認証エージェントは、少なくとも３個の認証特徴、場合によっては７個以上の認証特徴を要求することができる。患者が緊急治療室に入った場合の健康管理のシナリオを考えてみよう。医師は、タブレット型コンピュータの中に患者の画像（すなわち、現実世界の三次元オブジェクト）を撮り、患者の名前を述べ、医師の名前を述べることができる。認識プラットフォームは、画像および音響データ（例えば、マルチモーダル相互作用のデジタル表示）を分析して、患者および音声に関連した特徴を導出する。さらにタブレットのデジタル表示は、ＧＰＳ位置、時間、または他の情報を含むことができる。次いで導出した特徴を使用して、１つまたは複数の認証オブジェクトを同定し、このシナリオでは認証するオブジェクトは、患者の顔を含むことができる。それに応じて、認証エージェントは、認証特徴のセットをデジタル表示から、ならびに認証オブジェクト情報からの情報から導出する。認証特徴は、（ａ）患者の顔のＳＩＦＴ特徴、（ｂ）医師の音声パターン、（ｃ）患者の名前、（ｄ）医師の名前、（ｅ）緊急治療室のＧＰＳ座標、（ｆ）時間、（ｇ）人の顔のフィールドの奥行き、または（ｈ）恐らく患者の運転免許証もしくは健康保険証の画像を含むことができる。したがって、認証特徴の大きい群を使用して、コンテンツのアクセスレベルを決定することができる。この例では、コンテンツのアクセスレベルにより、医師が緊急事態に起因する患者の電子医療記録のすべてにアクセス可能になってもよい。

認証特徴に基づいて、該方法はまた、コンテンツのアクセスレベルを確立することを含むことができる。コンテンツのアクセスレベルは、どのコンテンツを、何のコンテンツを、またはどの範囲のコンテンツをコンテンツの消費者に利用可能にさせるかを示す。コンテンツは、取引情報、芸能情報、ニュース情報、スポーツ情報、販売促進情報、医療情報、安全情報、ゲーム情報、アプリケーションもしくはソフトウェア情報、命令情報、または他のタイプのデータを含む、広範囲の媒体タイプもしくは情報を網羅することができる。

特に好ましいタイプのコンテンツは、商品、サービス、または他のタイプの製品に関する販売促進情報を含む。例えば、対象物は、食料雑貨店で購入できる製品であることが可能である。製品自体は認証オブジェクトであることが可能であり、販売促進情報は製品、コマーシャル、広告、または他のタイプの販売促進情報の購入に向かって適用されるクーポンを含むことができる。

また該方法は、アクセスレベルに従ってコンテンツを活性化することを含む。活性化は、認証エージェント上で生じることが可能であるか、またはアクセスレベルをコンテンツのサーバに提供することを含むことができ、コンテンツのサーバは次いでコンテンツを活性化する。一部の実施形態では、活性化が生じる前に追加の活性化を引き起こす基準が満たされなければならない。例えば、活性化を引き起こす基準は、システムに入る多数の認証要求または絶対時間を要求することができる。恐らく相互作用の筋のエピソードは、１００人のユーザが映画のポスターの画像を取得した時だけ活性化される。引き起こす基準の他の例には、認証基準以外の要因、場合によっては認証基準を除く要因が含まれる。例えば、認証基準は、一日の特定の時間またはニュース速報に依存することができる。

さらに企図された方法は、電子機器、例えば、携帯電話またはタブレット型コンピュータが、アクセスレベルに従ってコンテンツを表すように構成することを含む。先に論じたように、電子機器がコンテンツを表すまたはレンダリングするように構成することは、電子機器が仮想マシン、好ましくは安全な仮想マシンを、コンテンツのサーバまたはコンテンツのプロバイダの制御下で起動するように命令することを含むことができる。仮想マシンは、アクセスレベルに基づいてコンテンツへのアクセスを制限することができる。このようなコンテンツから恩恵を受けることができる例示的電子機器には、携帯電話、タブレット型コンピュータ、コンピュータ、車両、キオスク、自動販売機、ロボット、電子装置、医療機器、安全システム、ゲーム機、または他のタイプの装置が含まれる。

マルチモーダル相互作用のデジタル表示を分析するために使用されるアルゴリズムは、データ内の相互作用または特徴に加わるオブジェクトに関連した特徴を追求する。このような特徴は、必ずしも画像内のシンボルの復号を含まない、または要求しない。したがって、認証特徴は、相互作用におけるオブジェクトに関連したシンボリックタグ、例えば、バーコードから導出した情報を欠く可能性がある。それでも、復号されたシンボル情報（例えば、文字、数字、バーコードなど）の使用は、プロセスを高めることができる。

オブジェクトを認証オブジェクトとして認識することに基づいた認証
本発明の主題の別の態様は、コンテンツの配信システムを含むと考えられ、この場合、コンテンツは、実際のオブジェクトが本当に認証オブジェクトであることを認識することに基づいて活性化される。配信システムは、図１に示されたように、認証オブジェクトのデータベース、認識プラットフォーム、および認証エージェントを含むことができる。以下の検討は、図１のエコシステムを詳述する。

認証オブジェクトのデータベースは、認証要素を記憶し、この場合、要素は特定のユーザに結合し、またオブジェクトに関する有効な認証特徴のセットを有する。有効な認証特徴は、要求された特徴および関連値または条件素性を表すことができる。さらに、認証要素は、相互作用における特徴の有無が適切な性質を有するとき、認証特徴が解除するはずであるコンテンツにポインタまたは参照記号を含むことができる。一部の実施形態では、認証オブジェクトのデータベースは、認証オブジェクトを表す数千、数百万、またはそれ以上の画像を記憶する画像データベースまたは画像検索エンジンを含むことができる。本発明の主題と共に使用するのに適切に適合することができる例示的画像データベースには、Ｇｏｏｇｌｅ（登録商標）画像、ＴｉｎＥｙｅ Ｒｅｖｅｒｓｅ Ｉｍａｇｅ Ｓｅａｒｃｈ Ｅｎｇｉｎｅ（商標）（ＵＲＬ、www.tineye.com参照）、医療画像データベース、または他のタイプの画像データベースが含まれる。一部の実施形態では、画像は、関連画像認証特徴（例えば、ＳＩＦＴ、フィールドの奥行き、画像データ特徴、メタデータなど）によってインデックスを付けられる。

認識プラットフォームを、他のタイプの様式と共にデジタル表示に関連した画像データを特に処理するように構成することができる。一旦認識プラットフォームが画像データを獲得すると、認識プラットフォームは、画像内のオブジェクトに関するオブジェクトの特徴を導出することができる。好ましくは、認識プラットフォームは、オブジェクトの特徴を使用して画像内のオブジェクトを他のオブジェクトから区別または認識し、この場合、認識されたオブジェクトは、認証オブジェクトと考えられる。認識プラットフォームは、オブジェクトの特徴を認証オブジェクトのデータベースに提示して、撮像されたオブジェクトが本当に認証オブジェクトであるかどうかを判定するために、オブジェクトの特徴を１つまたは複数の有効な認証特徴と比較することができる。２つ以上の認証要素が返信されてもよい。このようなシナリオでは、結果セットを、オブジェクトの特徴が有効な認証特徴のそれぞれの要素のセットをどの程度満足させたかに従ってランク付けすることができる。

認証エージェントは、画像の特徴を含むオブジェクトの特徴および有効な認証特徴を使用して、先に論じたようにコンテンツのアクセスレベルを決定する。認証エージェントは、対応する認証要素におけるポインタまたは参照記号に基づいて、またはユーザが作成した要求に基づいてコンテンツのアクセスレベルを決定できる。一部の実施形態では、ユーザは、特定のコンテンツを要求することができ、この場合、コンテンツデータベース内のコンテンツオブジェクトは、要求された認証要素を指す。しかし他の実施形態では、認証要素は、認証要素によって活性化できるコンテンツを指す。一旦コンテンツのアクセスレベルが認証エージェントによって確立されると、認証エージェントは、コンテンツのサーバがユーザのためにコンテンツを活性化するように許可することができる。

取得されたビデオストリームからの製品情報
本発明の主題のさらに別の態様は、製品情報を獲得する方法を含む。該方法は、特定の実施形態を表し、この場合、コンテンツの消費者は、ビデオストリーム内のビデオフレームの画像を取得することに基づいて、製品情報を活性化できる。該方法は、認識サーバまたは他のタイプの認識プラットフォームにアクセスを提供することを含む。認識サーバは、サービス、例えば、検索エンジンとして機能することができ、この場合、消費者は、ネットワーク接続を経て１つまたは複数の画像をサービスに送信することができる。

認識サーバは、表示されたビデオストリームから取得したビデオフレームを獲得し、この場合、ビデオフレームは、電子機器（例えば、携帯電話、車両、カメラ、タブレット型コンピュータなど）から送信される。用語「取得したビデオフレーム」は、少なくともビデオストリームの静止画像を意味するように婉曲的に使用されることを理解されたい。取得したビデオフレームは、恐らく電子機器上で再生中に取得される、ビデオフレームの１つまたは複数の実際のフレームであることが可能である。加えて、取得したビデオフレームは、電子機器上のカメラセンサによって撮られた静止画像を含むことができるか、または２つ以上の実際のビデオフレームが１つのフレームから別のフレームに移動する静止画像を含むことができ、これにより若干ぼやけた画像がもたらされることがある。認識サーバは、ネットワーク接続を経て電子機器から取得したビデオフレームを獲得することができる。取得したビデオフレームを取得するために使用できる例示的電子機器には、携帯電話、ゲームシステム、コンピュータ、タブレット型コンピュータ、キオスク、電子掲示板、またはカメラを用いて構成されたタイプの装置が含まれる。

取得したビデオフレームの性質に関わらず、認識サーバは、取得したビデオフレームから１つまたは複数のフレーム特徴を導出する。フレーム特徴は、ＳＩＦＴ特徴、知覚ハッシュ値、ヒストグラム、認識されたオブジェクト、または先に論じたように、取得したビデオフレームから導出できる他の特徴を含むことができる。

認識サーバは、フレーム特徴を使用して、類似の特徴を有する公知のビデオストリームを同定することができる。例えば、認識サーバは、フレーム特徴をクエリとして公知のビデオストリームのデータベースに送信することができる。それに応じてビデオストリームのデータベースは、フレームによって分析されたアプリオリ、恐らくフレームである、１つまたは複数の公知のビデオストリームを有する結果セットを返信する。結果セットにおけるビデオを、１つまたは複数の導出されたフレーム特徴に従ってランク付けすることができる。さらに結果セットは、関連した製品情報を含む元のビデオストリームについての追加情報を含むことができる。例えば、個人が、テレビ番組のスクリーンショットを送信し、それを認識サーバに送信することができる。認識サーバは、元のテレビ番組を同定し、番組で取り上げられた、または番組の放映中の広告で取り上げられた製品の一覧を返信することができる。

企図された方法は、電子機器が製品情報を消費者に表すように構成することをさらに含む。製品情報またはその内容に対する他のタイプの情報は、名前、銘柄、型番、購入価格、該機器が取引に参加するように構成する命令、または他のタイプの情報を含むことができる。

一部の実施形態では、ビデオストリームはまた、取得したビデオフレームと共に取得することができる音響データを含むことができる。取得したビデオフレームが取得されると、フレームに関連した音響データも取得することができる。また認識サーバは音響特徴を導出することができ、音響データを使用して、ビデオストリームを同定することもでき、場合によってはビデオストリーム内に位置付けることもできる。

特に好ましい実施形態では、音響データは、人間の聴覚を超える音のデータ表示、例えば、超音波署名を含むことができる。したがって、ビデオストリームは、元のストリーム、製品、放送、源、または他のオブジェクトを同定するために使用できる、追加の音響情報を含むことができる。このような実施形態では、認識サーバは音響ストリームを分析して、ストリーム、またはストリームに関連した製品を認識するために使用できる周波数成分を導出できる。

使用事例
以下の検討は、特定の市場への本発明の主題をより明確にすることを意図する、特性の使用事例のシナリオを表す。各使用事例のシナリオはまた、本発明の主題であると考えられることを理解されたい。

ある使用事例には、製品情報に基づくテレビ番組を提供することが含まれる。消費者がテレビ番組で興味のある製品、または他のオブジェクトを見たとき、消費者は、自身の携帯電話を使用してスクリーンショットを取得できる。さらに番組は、１つまたは複数の組み込まれた高周波数信号、２０ＫＨｚを超える音を含むことができ、２０ＫＨｚを超える音は、番組の特徴または番組における製品を同定する追加情報を運ぶことができる。例えば、携帯電話は、高周波数の音響信号を取得し、その信号を復号して組み込まれた情報を導出することができる。携帯電話は、所望したような認識プラットフォームとして作動することができることを理解されたい。したがって、携帯電話は、生データまたは画像もしくは音響から導出した特徴を認証サービスに送信でき、認証サービスは、ビデオスクリーンに関連した製品情報を活性化する。例えば、音楽ビデオは様々なファッションを特徴付けることができる。携帯電話のユーザは、ビデオに関連した製品情報を要求することによってそのファッションを購入できる。

別の使用事例は、定期刊行物またはポスターに関連したコンテンツを活性化することを含むことができる。消費者がスポーツ行事の１つまたは複数の写真を有する雑誌を受領するシナリオを考えてみよう。消費者は、自身の携帯電話を使用して写真の画像を取得する。写真の画像を、画像データベースに対して、恐らくＧｅｔｔｙｉｍａｇｅｓ（商標登録）（ＵＲＬ、www.gettyimages.com参照）から利用可能な画像に基づいて、認証することができる。画像は分析され、公知の画像と比較される。整合が見出された場合は、実際のスポーツ行事のライブまたは録画の実際のビデオ画像を、消費者の携帯電話に送信することができる。

同様の使用事例には、ポスターまたは掲示板のための画像に基づいたコンテンツを活性化することが含まれる。未知の間もなくある事象を広告する掲示板またはポスターの販売促進を考えてみよう。目標は、謎めいた事象、恐らく、映画の封切りまたは新しいタイプのスマートフォンの発売における、高まるまたは重大な関心を展開させることである。恐らく販売促進は、日時を述べるに過ぎず、次いで１０，０００人が販売促進の取得した画像に基づいて同時に活性化を要求した場合に、コンテンツが活性化されることを告げる。その日時が来て１０，０００の要求が届いたときに、コンテンツは活性化される。販売促進の画像は、活性化特徴を含む一方で、１０，０００の要求は活性化を引き起こす基準を表すことを理解されたい。

一層さらにポスターは、トランスメディアの放送チャンネルを表示することができる。ポスターの画像は、ポスターの全視聴者に放送されている現在のコンテンツを活性化することができる。またすべての消費者が、同じコンテンツを実質的に同時に視聴する、または受信するように、コンテンツを同期することができる。例えば、Ｋｏｂｅ Ｂｒｙａｎｔのポスターは、コンテンツの更新を毎日、場合によっては一日中提供することができる。消費者がポスターの画像を取得することによりコンテンツを活性化すると、消費者は、ラジオ局またはテレビチャンネルと同様に現在配信されているコンテンツを受信するはずである。コンテンツは、スポーツニュース、ニュース、ブログ投稿、ビデオセグメント、解説、実際のゲーム、または他のタイプのコンテンツに基づいてプログラミングすることを含むことができる。

さらに別の使用事例には、買い物中にクーポンを消費者に提供することが含まれる。消費者が店舗内を通って歩くと、消費者は目標の製品の画像を、恐らく価格の比較をしようとして取得することができる。しかし、店舗は消費者を失うことを望まないかもしれない。それに応じて、コンテントサービスとして作動する店舗は、場所情報、画像特徴、または他の要因に基づいて価格の比較事象を検出できる。価格の比較事象を、店舗を知らせる遠隔検索エンジンによって検出することができるか、または消費者の携帯電話が店舗のＷｉ−Ｆｉアクセスポイントを利用する場合、店舗内で検出できる。その事象がどのように検出されるかに関わらず、店舗は、消費者を留めようとして製品に関連したクーポンを活性化できる。したがって、小売店は、目録またはタグがある棚上の製品をバーコードを用いて修正する必要なしに、活性化されたコンテンツの形でクーポンを提供できる。

さらに別の使用事例は、コンピュータに基づいたゲームを含むことができる。開示された基礎構造により、現実世界を通してオンデマンドのコンテンツ層を生成することが可能になり、この場合、コンテンツを、現実世界とのプレーヤーの１つまたは複数の相互作用に基づいて活性化することができる。例えば、コンテンツを、単一のプレーヤーの相互作用よりむしろ多数のゲームプレーヤーの相互作用に基づいて活性することができる。このようなシナリオは、「マジック」、「綴り」、あるいは物理学を支持することができるゲームを生み出す。恐らく、空想設定に基づいて拡大した現実ゲームでは、チームのプレーヤーは、全員が特定の場所にいて、その場所でオブジェクトと相互作用なければならないことがある。場合によっては、プレーヤーは、儀式を行うために一致した行動を取る、または争っている互いを支持するふりをするために個別に行動する必要があるかもしれない。デジタル表示が適切な認証特徴または引き起こす基準を有する場合に、プレーヤーが、自身の相互作用の１つまたは複数のデジタル表示を取得することを達成すると、プレーヤーは新しいコンテンツを活性化するはずである。Ｆｏｕｒｔｈ Ｗａｌｌ Ｓｔｕｄｉｏｓ（商標）（ＵＲＬ、fourthwallstudios.com参照）によって供給された機能を、このようなゲームをするシナリオの使用に適切に適合させることができる。

また健康管理に関連した使用事例もある。一例には、コンテンツを活性化するためにゲノム情報を使用することが含まれる。例えば、固体（例えば、人、ペット、動物、植物など）のゲノムを分析して、その固体のゲノムの特徴を決定することができる。ゲノム特徴を導出するための例示的技法には、Ｆｉｖｅ３ Ｇｅｎｏｍｉｃｓ（商標）によって開発された技法が含まれる。次いでゲノム特徴を生成された署名またはゲノムのヒートマップ画像にリンクさせることができる。署名またはヒートマップは、ゲノムを表すバーコードまたはＱＲコード（登録商標）と考えることができる。さらに署名の特徴は、ゲノムの認証特徴になる。次いで署名は、コンテンツを活性化するために使用できる、公開されている認証オブジェクトであることが可能である。コンテンツの安全性は、恐らく場所データ、位置データ、三次元オブジェクトデータ、音声データ、または他の要因を含む、署名の画像の取得を超える追加様式を要求することによって、さらに高めることができる。

別の健康管理のアプリケーションは、先に論じたように緊急事態に基づいてコンテンツを活性化することを含むことができる。恐らく緊急治療室内の医師は、人を撮像してその医療記録を活性化する、または人の運転免許証または健康保険証の裏面上のその人のゲノム署名またはヒートマップを撮像する。適切に認証すると、患者の医療記録は医師のために活性化される。

一層さらに別の使用事例は、ペットの同定システムを含むことができる。ペットの所有書は、自身のペットをこの文書内に論じた機能を供給するオンラインサービス内に登録することができる。所有者は、自身のペットの１つまたは複数の写真を認証オブジェクトとして送信することができる。システムは、認証特徴をその写真から導出する、またはペットの所有者に所望の認証特徴を選択するオプションを供給することができる。ペットの所有者は、同定を容易にするためにペットの首輪上にペットの写真を取り付けることができる。ペットが迷子になったとき、ペットを見つけた人は、首輪上のペットの画像または写真の画像取り込むことができる。次いで画像から導出された特徴を使用して、コンテンツを活性化することができる。この特定の場合には、活性化されたコンテンツは、所有者のコンテンツ情報を含むことができ、所有者のコンテンツ情報をペットの発見者に表示することができる。追加のコンテンツは、発見者に送信できる所有者の同定、恐らくペットと一緒の所有者のビデオまたは画像を含むことができる。さらにシステムは、所有者の携帯電話上のコンテンツを活性化して、ペットの発見者がいる場所、場合によってはペットを見つけるための方向も示すことができる。

追加の検討事項
以下の追加の検討事項は、本発明の主題の多様な性質をさらに示すために表される。

本主題を、認証およびコンテンツの活性化エコシステムの観点から表すことを理解されたい。エコシステムの各要素を、システム内で互いに連通した個別の機能要素として表す。しかし、システムの要素を、単一の装置（例えば、携帯電話）内に一体化する、または所望通りに多数の装置（例えば、携帯電話、テレビ、およびクラウド・コンピューティングシステム）を跨いで配信することができる。電子機器は、認証プラットフォームまたは認証プラットフォームの側面を含むことができることが特に企図される。

活性化されたコンテンツを異なる方法でアクセスすることができる。一部の実施形態では、一旦適切な認証が達成され、コンテンツのアクセスレベルが決定されると、コンテンツを電子機器に単に配信できるに過ぎない。コンテンツをコンテンツのサーバから押し出す、または装置から引き入れることができる。したがって、コンテンツを受信する人はそれぞれ、コンテンツを自身の相互作用に基づいて異なるときに個別に受信する。他の実施形態では、コンテンツを多数の人の間で同期した方法で配信でき、この場合、その人々は同じコンテンツを実質的に同時に受信する。例えば、Ｋｏｂｅ Ｂｒｙａｎｔのポスターの例に戻ると、それぞれの人は放送コンテンツを同時に受信することができる。さらに他の状況には、活性化を引き起こす基準を首尾よく満たし、関連した活性化特徴を発見した数少ない選ばれた人に、同期した活性化されたコンテンツを配信することが含まれてもよい。

別の考慮事項は、活性化されたコンテンツを同時に視聴している消費者の数に関する。何百万人または何十億人とは言わないまでも、何千もの人がコンテンツを同時に活性化する場合、基礎構造は大量の人へのコンテンツの配信を支持しなければならない。最終配信に容易に利用できるように、活性化前にコンテンツをエッジキャッシュすることができる。コンテンツをネットワークスイッチにおいて、仲介サーバで、パーソナルエリアネットワーク装置もしくはプレーヤー、インターネットサービスプロバイダで、アクセスポイントにおいて、またはコンテンツに対して充分なメモリを有する他の場所でエッジケースであることが可能である。例えば、医療記録またはゲノムコンテンツを、Ｎａｔｉｏｎａｌ Ｌａｍｂｄａ Ｒａｉｌ（www.nlr.net参照）内の多くのサーバに沿ってキャッシュすることができる。

また何千の人に対してコンテンツを活性化することは、コンテンツのプロバイダに対して機会を提供する。消費者と企図したエコシステムとの間の相互作用を、評価目的で追跡することができ、この場合、文字通り数千人がコンテンツを同時に活性化する。人々の層を、人々のアカウント情報に基づいて獲得し、プライバシー制限を受け、コンテンツのプロバイダに提供されることが可能である。

無数の可能な認証特徴または認証様式の性質に起因して、コンテンツのプロバイダおよび消費者は、多くの可能な方法にアクセスして、認証要件を生成する。こうした広範囲の可能性は、否定論拠の感覚を生み出す能力を引き起こす。例えば、人がその認証要因の断念を強いられた場合、人はその要因の小さな側面しか明らかにできず、要因の小さな側面は最小コンテンツのみを解除する。認証特徴が、自身の結婚指輪と並置されたペンクリップを有するある人のペンを要求するシナリオを考えてみよう。ペンクリップが結婚指輪に向いているとき、その人の全コンテンツを活性化できる。しかし、クリップが結婚指輪の反対にあるときは、非常にわずかな変化だが、最小情報のみが活性化される。したがって、その人は、その人があらゆる追加情報の存在をもっともらしく否定できる方法で、情報を公開したように見える。一層さらに、ペンおよび指輪を他の配向に置くことは、他の電子機器上のコンテンツを活性化することができる。恐らく指輪をペン先に置くことは、テキストメッセージまたは電話のメッセージを含むコンテンツを警察署に活性化させることができる。

特に好ましい実施形態は、マルチモーダル認証およびコンテンツ配信エコシステムの側面、役割、または責任をオペレーティングシステムの中に一体化する。このような手法は、専用アプリケーションをダウンロードする、新しいソフトウェアをインストールする、または複雑な方法で装置と相互作用するために、電子機器のユーザを軽減させる。例えば、電子機器が環境データを収集すると、認証モジュールは、装置の中に流れ込む環境データまたは他のデジタル表示を分析して、電子機器がそれ自体を発見する環境に関連し得る、オブジェクトまたは特徴を認識することができる。必要な場合または望ましい場合は、オペレーティングシステムは、その分析を遠位のサービスにオフロードできる。さらにオペレーティングシステムは、１つまたは複数の仮想マシンのインスタンスを作成して、恐らくソフトウェアを実行することを含む関連コンテンツを表し、この場合、仮想マシンは、オペレーティングシステムまたは遠隔コンテンツのプロバイダの制御下にある。

この文書のかなり前部で参照したように、コンテンツは多くの異なる形を取ることができる。ある特定の企図された形のコンテンツは、目標電子機器が行為をするように構成する、実行可能な命令を含む。例えば、消費者は、自身のカメラ付き携帯用ゲームシステムで映画のポスターを撮像してもよい。適切に認証すると、映画のプロバイダは、ゲームシステムが相互作用システムと結合した仮想マシンを起動するように命令することができる。仮想マシンは、ゲームシステムが購入インターフェイスを表示するように構成する命令をロードすることができる。ユーザが映画を購入した場合、映画を仮想マシン内で安全な方式で活性化することができる。トランザクションは、コンテンツ命令の受信に応答して取ることができる行為のみを表す。すべてのタイプの行為は企図される。

コンテンツの表示は、電子機器上に画像をレンダリングすること、音楽を再生すること、または電子機器が行為を開始するように構成することより多くを含むことができる。一部の実施形態では、コンテンツの表示は、三次元オブジェクトを構築すること、または生成することを含むことができる。例えば、コンテンツは、三次元オブジェクトを樹脂、プラスチック、電力、または他の材料から構築できる、三次元プリンタに対する命令を含むことができる。本発明の主題で使用するように適切に適合できる例示的三次元プリンタには、ＭａｋｅｒＢｏｔ（商標）（www.makerbot.com参照）、ＣＮＣマシン、ＺＰｒｉｎｔｅｒ（登録商標）（www.zcorp.com参照）、または三次元オブジェクトを生成できる他の電子機器が含まれる。本発明の主題は、プリンタがオブジェクトを生成できる一方で、コンテンツのプロバイダの権利を保持するように、三次元プリンタまたはＣＮＣマシン内で仮想マシンのインスタンスを外部源の制御下で作成することを含むと考えられることを理解されたい。

また本発明の主題は、有効な認証オブジェクトの配置の登録、および恐らくその配置を１つまたは複数の相互作用にリンクさせることを含むと考えられる。有効な認証オブジェクトの登録は、１つまたは複数の技法を通して引き起こすことができる。１つの可能な技法には、有効な認証オブジェクト（例えば、運転免許証、玩具、靴、身振り、話した言葉など）を相互作用空間内に配置すること、およびオブジェクト全体の配置の行為を相互作用のデジタル表示として記録することが含まれる。認証エージェントは、デジタル表示を分析して関連した認証特徴セットを並置に蓄積でき、次いでこれを認証データベース内に記憶することができる。次いで配置を生み出すエンティティは、所望のコンテンツまたは行為（例えば、アプリケーションを起動する、相互作用を行う、メッセージを送信するなど）をもつ並置を結びつけることができる。別の技法は、それぞれの有効な認証オブジェクトのデジタル表示を個別に取得すること、および個々のオブジェクトを登録することを含むことができる。次いで互いに関連した個々のオブジェクトの１つまたは複数の並置を取得すること、この場合、それぞれの並置をコンテンツにリンクさせることができる。スマートデバイス（例えば、携帯電話、タブレット、ファブレット、コンピュータ、キオスク、ＡＴＭなど）の安全システムを一例として考えてみよう。ユーザは、異なる様式のデータ取得を使用して多数のオブジェクトを登録することにより、デバイスへのアクセスをロックすることができる。恐らくユーザは、自身の結婚指輪、話した言葉、および背景画像を横切る結婚指輪の動きの間の並置を要求することにより、デバイスをロックしてもよい。一旦登録されると、デバイスは、結婚指輪、言葉、および背景に関連した認証特徴の並置が検出されたときのみ解除されるはずである。したがって、ユーザは、オペレーティングシステムまたはデバイスの特徴（すなわち、デバイスのコンテンツ）へのアクセスを許可されることが可能である。

すでに説明した修正に加えてさらに多くの修正が、本明細書の発明概念から逸脱することなく可能であることを当業者には明らかになるであろう。したがって、本発明の主題は、添付の特許請求の範囲以外に限定されない。さらに、本明細書および特許請求の範囲の両方を解釈する際に、すべての用語は、本概念と一致する広範囲の可能な手法に解釈されるべきである。特に、用語「ｃｏｍｐｒｉｓｅｓ（含む）」および「ｃｏｍｐｒｉｓｉｎｇ（含む）」は、要素、構成部品、もしくはステップを非排他的手法で指すように解釈されるべきであり、指した要素、構成部品、もしくはステップが存在する、または利用される、または明確に指されていない他の要素、構成部品、もしくはステップと組み合わされてもよいことを示す。本明細書および特許請求の範囲が、Ａ、Ｂ、Ｃ…およびＮからなる群から選択されたものの少なくとも１つを指す場合、その文は、ＡプラスＮ、またはＢプラスＮなどではなく、群から１つの要素のみを必要とすると解釈されるべきである。

Claims (35)

1. コンテンツを活性化する方法であって、
   電子機器が認証エージェントにアクセスできることと、
   前記機器によって、複数の対象物を備える物理的環境と相互作用するデジタル表示を獲得することと、
   少なくとも２つのオブジェクトを、前記デジタル表示に基づいて第１の有効な認証オブジェクトおよび第２の有効な認証オブジェクトとして前記環境内の前記複数の対象物から区別することと、
   前記第１の有効な認証オブジェクトに関連した、認証特徴の第１のセットを前記デジタル表示から、また前記第２の有効な認証オブジェクトに関連した、認証特徴の第２のセットを前記デジタル表示から導出することと、
   前記認証エージェントにより、コンテンツのアクセスレベルを、認証特徴の前記第２のセットに対して認証特徴の前記第１のセットの並置の機能として確立することと、
   前記認証エージェントにより、コンテンツを前記コンテンツのアクセスレベルに基づいて活性化することと、
   出力装置が前記コンテンツのアクセスレベルに従って、前記コンテンツを表すように構成することとを含む方法。
2. 以下のタイプのモーダルデータ、すなわち、画像データ、モーションデータ、音響データ、温度データ、場所データ、位置データ、配向データ、メタデータ、ユーザデータ、運動データ、生体データ、言語データ、加速度データ、および先頭部データのうちの少なくとも２つを含む、前記デジタル表示の一部としてマルチモーダルデータを獲得することをさらに含む、請求項１に記載の方法。
3. 認証特徴の前記第１のセットを導出する前記ステップは、異なる様式の少なくとも２つの特徴セットを導出することを含む、請求項２に記載の方法。
4. 認証特徴の前記第１のセットを導出する前記ステップは、画像特徴を前記デジタル表示における前記第１の有効な認証オブジェクトの画像データから導出することを含む、請求項１に記載の方法。
5. 認証特徴の前記第１のセットは、前記第１の有効な認証オブジェクトの一部の画像データを含む、請求項４に記載の方法。
6. 認証特徴の第１のセットを導出する前記ステップは、ハッシュを認証特徴として前記第１の有効な認証オブジェクトに関連した前記デジタル表示から計算することを含む、請求項１に記載の方法。
7. 認証特徴の前記第１のセットは、以下から、すなわち、ＳＩＦＴ特徴、画像特徴、およびフィールドの奥行きのうち少なくとも１つを含む、請求項１に記載の方法。
8. 認証特徴の前記第１のセットは、以下のタイプの特徴データ、すなわち、画像データ、モーションデータ、音響データ、温度データ、場所データ、位置データ、配向データ、メタデータ、ユーザデータ、運動データ、生体データ、言語データ、加速度データ、および先頭部データのうちの少なくとも２つを含む、請求項１に記載の方法。
9. 前記デジタル表示における前記第２の有効な認証オブジェクトに対する、前記第１の有効な認証オブジェクトの相対位置から導出された相対位置情報に基づいて、認証特徴の前記第２のセットに対する、認証特徴の前記第１のセットの前記並置を決定することをさらに含む、請求項１に記載の方法。
10. 前記並置を認証特徴の前記第１のセットおよび認証特徴の前記第２のセットから導出された相対位置情報の機能として決定することをさらに含む、請求項９に記載の方法。
11. 前記デジタル表示における前記第２の有効な認証オブジェクトに対する、前記第１の有効な認証オブジェクトの相対配向から導出された相対配向情報に基づいて、認証特徴の前記第２のセットに対する、認証特徴の前記第１のセットの前記並置を決定することをさらに含む、請求項１に記載の方法。
12. 前記並置を認証特徴の前記第１のセットおよび認証特徴の前記第２のセットから導出された相対配向情報の機能として決定することをさらに含む、請求項９に記載の方法。
13. 前記第１および第２の有効な認証オブジェクトの少なくとも１つは、印刷媒体を含む、請求項１に記載の方法。
14. 前記印刷媒体は、以下から、すなわち、運転免許証、パスポート、署名、小切手、文書、ポスター、掲示板、写真、レンダリングした画像、本、新聞、および雑誌のうちの少なくとも１つを含む、請求項１３に記載の方法。
15. 前記第１および第２の有効な認証オブジェクトの少なくとも１つは、実質的な三次元オブジェクトを含む、請求項１に記載の方法。
16. 前記実質的な三次元オブジェクトは、以下から、すなわち、人、顔、動物、車両、建物、玩具、植物、コンピューティングデバイス、建造物、食品、および置物のうちの少なくとも１つを含む、請求項１５に記載の方法。
17. 前記第１の有効な認証オブジェクトは、レンダリングした画像を有するコンピューティングデバイスを備える、請求項１に記載の方法。
18. 認証特徴の前記第１のセットは、少なくとも３個の認証特徴を含む、請求項１に記載の方法。
19. 認証特徴の前記第１のセットは、少なくとも７個の認証特徴を含む、請求項１８に記載の方法。
20. 前記コンテンツとして製品に関連した販売促進を表示することをさらに含む、請求項１に記載の方法。
21. 前記製品は前記第１の認証の有効な認証オブジェクトに関連する、請求項２０に記載の方法。
22. 前記販売促進は、以下から、すなわち、クーポン、コマーシャル、供給、セール、抽選券、および広告のうちの少なくとも１つを含む、請求項２０に記載の方法。
23. 前記コンテンツは、以下から、すなわち、取引情報、芸能情報、ニュース情報、スポーツ情報、販売促進情報、医療情報、安全情報、およびゲーム情報のうちの少なくとも１つを含む、請求項１に記載の方法。
24. 前記コンテンツを活性化する前記ステップは、活性化を引き起こす基準の機能として前記コンテンツを活性化することを含む、請求項１に記載の方法。
25. 前記活性化を引き起こす基準は、絶対時間に依存する、請求項２４に記載の方法。
26. 前記活性化を引き起こす基準は、多数の認証要求に依存する、請求項２４に記載の方法。
27. 前記活性化を引き起こす基準は、認証特徴の前記第１および第２のセット内の特徴以外の要因に依存する、請求項２４に記載の方法。
28. 前記活性化を引き起こす基準は、前記認証特徴を除く要因に依存する、請求項２７に記載の方法。
29. 認証特徴の前記第１のセットは、前記第１の有効な認証オブジェクトに関連したシンボリックタグから導出された情報を欠く、請求項１に記載の方法。
30. 前記認証特徴はバーコードデータを欠く、請求項２９に記載の方法。
31. 前記出力装置が前記コンテンツを表すように構成する前記ステップは、前記出力装置が仮想マシンを起動するように命令することを含む、請求項１に記載の方法。
32. 前記仮想マシンを前記アクセスレベルに従って前記コンテンツの権利について保護することをさらに含む、請求項３１に記載の方法。
33. 前記仮想マシンによって、前記コンテンツのアクセスレベルに従ってコンテンツへのアクセスを制限することをさらに含む、請求項３１に記載の方法。
34. 前記電子機器は、以下から、すなわち、携帯電話、タブレット型コンピュータ、コンピュータ、ゲーム機、車両、キオスク、自動販売機、ロボット、電子装置、医療機器、および安全システムのうちの少なくとも１つを備える、請求項１に記載の方法。
35. 前記電子機器は前記出力装置を備える、請求項１に記載の方法。

Images