JP2015007992A - データ取得及び識別のためのシステム及び方法 - Google Patents
データ取得及び識別のためのシステム及び方法 Download PDFInfo
- Publication number
- JP2015007992A JP2015007992A JP2014162208A JP2014162208A JP2015007992A JP 2015007992 A JP2015007992 A JP 2015007992A JP 2014162208 A JP2014162208 A JP 2014162208A JP 2014162208 A JP2014162208 A JP 2014162208A JP 2015007992 A JP2015007992 A JP 2015007992A
- Authority
- JP
- Japan
- Prior art keywords
- image
- data
- information
- enabled device
- item
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 66
- 230000008569 process Effects 0.000 claims description 37
- 238000012545 processing Methods 0.000 claims description 16
- 238000004891 communication Methods 0.000 claims description 6
- 230000006870 function Effects 0.000 claims description 5
- 230000008859 change Effects 0.000 abstract description 4
- 238000000354 decomposition reaction Methods 0.000 description 18
- 230000008901 benefit Effects 0.000 description 5
- 238000010606 normalization Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000011156 evaluation Methods 0.000 description 4
- 230000011218 segmentation Effects 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 238000013459 approach Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 230000001186 cumulative effect Effects 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 238000012512 characterization method Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000005855 radiation Effects 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000013144 data compression Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000003709 image segmentation Methods 0.000 description 1
- 238000010422 painting Methods 0.000 description 1
- 230000002250 progressing effect Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/46—Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
- G06V10/462—Salient features, e.g. scale invariant feature transforms [SIFT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
- G06F16/5838—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2457—Query processing with adaptation to user needs
- G06F16/24578—Query processing with adaptation to user needs using ranking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/248—Presentation of query results
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/51—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
- G06F16/5854—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using shape and object relationship
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/56—Extraction of image or video features relating to colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
- G06V10/751—Comparing pixel values or logical combinations thereof, or feature values having positional relevance, e.g. template matching
- G06V10/7515—Shifting the patterns to accommodate for positional errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/14—Image acquisition
- G06V30/142—Image acquisition using hand-held instruments; Constructional details of the instruments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/14—Session management
- H04L67/141—Setup of application sessions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
Abstract
【課題】対象の変更を要することなく取り込んだ画像をデジタル的に識別する。
【解決手段】データベース装置中の複数の対象から対象を特定するために画像の特性を使用する識別方法である。デジタル画像中の実際の対象を識別するために、データは、一つ又は複数のデータベースの対象データとの形状比較、グレースケール比較、ウェブレット比較、及びカラーキューブ比較のようなパラメータに分解される。
【選択図】図1
【解決手段】データベース装置中の複数の対象から対象を特定するために画像の特性を使用する識別方法である。デジタル画像中の実際の対象を識別するために、データは、一つ又は複数のデータベースの対象データとの形状比較、グレースケール比較、ウェブレット比較、及びカラーキューブ比較のようなパラメータに分解される。
【選択図】図1
Description
本発明は、2001年9月5日に出願された米国仮出願第60/317521号と2000年11月6日に出願された米国仮出願第60/246295号に利益を主張する2001年11月5日に出願された米国特許第09/992942号の一部継続出願である。
本発明は、データベース中の複数の対象(object)から対象を識別するための特有のデータを使用して、デジタル的に取得された対象の画像から対象を識別する方法及び手順(process)に関する。
対象の変更や美観の毀損を伴わずに、デジタル的に取得された対象を画像のデーダースから識別することが要求されている。以下の例がある。
大型の美術館での絵画や他の芸術作品の識別。この場合、美術館が美術館中に所望の対象を展示でき、かつ展示物が記号やコンピュータのスクリーンで隠れたり追いやられたりすることがないようにしつつ、美術館中の対象に関する付加的な情報を可搬のディスプレイにより提供することが望まれる。
単にその機械の視覚的なデータを用いることによる、機械との通信リンクの確立。
影、反射、部分遮蔽、及び視覚的ジオメトリの振動、又は完全な画像を取得する上での他の障害(obstructions)の存在下でのデータ中の対象の外観に基づく対象の位置及び向きの計算。デジタルカメラ内蔵の携帯電話のようなデータ取得ハードウエアが市場に出回ってきており、それらは遠隔の場所への伝送のための写真撮影以外の用途にも有用であることが好ましい。また、あらゆる識別システムが利用可能な計算能力を効率的に利用し、データベースの規模や利用可能な計算能力に応じて、識別に必要な計算をローカルで実行し、インターネット接続されたコンピュータと共同で実行し、又はリモートで実行できることが望ましい。加えて、サーチ及び情報検索の高速化に利用であれば、このように識別システムがバーコード、特別な目標(special target)、又は文字言語のような毀損の識別記号を使用できることが好ましい。
本発明は、前述の要求を解決する。データがいったんデジタル的に取り込まれると、このデータのサーチによって画像内に記号のコンテンツ(symbol content)が含まれているか否かが決定される。記号が含まれていれば、記号が復号化されて適切なデータベースとの通信が開始され、この通信は通常はインターネットを使用し、その記号についての最良の適合が戻される。いくつかの場合には記号が検知されるが、非多義的な識別は可能でない。この場合及び記号データが検知できない場合には、データに特有の特性を検知する識別アルゴリズム(identification algorithms)によって、データが分解される。次に、これらの特性がデータベース中での一つ又は複数の最良の適合ないしはマッチ(match or matches)を与えるために使用され、利用可能な場合には、部分的な記号情報により「最良」の決定が支援される。
従って、本発明はインターネットのようなネットワークを介した対象及び画像の情報へのリンク付けを収容することができる技術及びプロセスを提供し、リンク付けされた対象に変更を加える必要はない。画像ないしは対象はその可視の外観のみによって識別されるので、バーコードの適用、無線又は光学トランシーバないしは送信器、又は対象を識別するための幾つかの他の手段、又はその中に検知可能な情報を符号化するような画像又は対象の変更を含む対象をデジタル情報にリンク付けする伝統的な方法は、必要とされない。ユーザ又は装置は、対象に対して「リンク付け(linking)」することで対象と対話することもできる。例えば、ユーザは「ポイント・アンド・クリック」することで自動販売機にリンクできる。インターネットを介して自動販売機を所有する会社に装置を接続することができる。一方、会社は自動販売機との接続を確立し、それによってユーザは自動販売機に対して確立された通信チャンネルを取得し、自動販売機と対話することができる。
本発明の分解アルゴリズム(decomposition algorithms)では、見える形状に影、反射、部分閉塞、及び変化があったとしても、画像中の可視の外観に基づいて、高速で信頼性の高い画像及び/又は対象の検知及び認識を行うことができる。前述のように、本発明は、アルファベット文字、バーコード、又は2次元マトリクスコードのような対象上に現われている一般的な記号に基づいて、画像及び対象を検出、復号化、及び識別することもできる。
特定の対象が識別されると、画像が取り込まれた時のユーザに対する対象の位置及び向きを、画像中の対象の外観に基づいて決定することができる。これは、セキュリティシステムにおいて多数のカメラでスキャンされた人々の位置及び/又は身元、GPSよりも正確であるかGPS信号を受信できない領域でも使用可能なパッシブ型のロケータ・システム、乗物からの送信を必要としない乗物の位置、及び他の多くの用途となり得る。
携帯電話のような可搬の装置に本発明を組み込むと、その装置のユーザは、当該対象に装置をポインティングないしは向けることでそのユーザの環境下で画像及び対象にリンクし、「ポイント・アンド・クリック」して画像を取り込むことができる。その後、装置が他のコンピュータ(サーバ)に画像を送信し、サーバでは画像が分析されて当該対象又は画像が検知及び認識される。次に、対象と対応する情報のネットワークアドレスが当該「サーバ」から可搬の装置に返信され、可搬の装置はネットワークアドレスを使用して情報にアクセスすることが可能となるので、システムのデータベースに対象に関する情報の一部のみを記憶しておけばよい。
画像/対象の検知及び/又は画像中で検知された記号の復号化を含む画像処理の一部又はすべてを、可搬の(クライアント)装置とサーバとの間で任意に分配することができる。換言すれば、ある処理をクライアントで実行し、ある処理をサーバで実行してもよい。また、いずれの特定の処理をクライアントとサーバのいずれで実行されるかを特定することなく実行してもよい。しかしながら、すべての処理を一方又は他方のプラットフォームで実行してもよく、あるいは一つのプラットフォームを構成するように二つのプラットフォームを組み合わせてもよい。データ処理は並列計算法で実行することができるので、データベースサイズ及びトラフィック負荷に関するシステムの基準化が容易である。
従って、本発明の目的は、対象の変更を要することなく取り込んだ画像をデジタル的に識別するための、システム及び方法を提供することにある。
他の目的は、製造業者が決して予期していないような方法でデジタルキャプチャ装置を使用することにある。
他の目的は、対象の部分的なビュー(views)ないしは視像から対象を識別可能とすることである。
他の目的は、公衆接続(public connection)を要しない操作装置を備える通信手段を提供することである。
他の目的は、取り込んだデータから引き出された情報及びデータを電話装置がサーバに伝送できることである。
本発明のさらに他の目的は、動画像をサーバに伝送できる電話装置を提供することである。
他の目的は、データ自体を伝送するのではなく、データから引き出された情報/データを電話装置がサーバに伝送できる通信手段を提供することである。
本発明の他の目的は、電話装置がサーバに動画像及び/又は静止画像を伝送できるようにすることである。
本発明のさらに他の目的は、サーバが情報のアイテムを他の末端の装置に送信できるようにすることである。
本発明のさらに他の目的は、システムがデータ処理、データのコントラスト強調(contrast enhancement)、ノイズ除去、及びデータぼけ鮮鋭化ないしはぼけ補正(de-blurring)を実行できるようにすることである。
本発明のさらに他の目的は、認識及び/又はサーチプロセスの前にシステムがデータ処理を実行できるようにすることである。
また、本発明のさらに他の目的は、データの認識及び/又はサーチプロセスが失敗した場合でもシステムがデータ処理を実行できるようにすることである。
本発明のこれらの及び他の目的並びに利点は、添付図面を参照した以下の詳述を考慮すると当業者にとって明らかである。
本発明は、物理的な対象の画像をリモートで取り込みないしは取得することのみにより、インターネットのコンテンツのような情報をユーザに提示することができる新規なプロセスを含む。符号化された情報がリモートで取得した画像に含まれていてもよいが、対象の画像以外の物理的な対象に関する追加の情報が、リンクされた対象に符号化されている必要はないので、符号化された情報がリモートで取得した画像に含まれている必要はない。いかなる追加の符号ないしは装置、無線、光学等も、対象に埋め込まれ又は添付されている必要はない。画像リンクされた対象は、データの取得とリンクの実行に使用するための装置に返信される関連する情報のアドレスと共に、デジタル画像処理のみにより、ユーザの取得した画像内で位置付けして識別することができる。このプロセスは、デジタルデータのノイズ及び破損(損失のあるデータの圧縮/解凍の結果生じ得る。)、遠近法的誤り(perspective error)、回転、並進(translation)、縮尺の相違、光源の相違により生じる照明の変化、及び付影、反射、又は遮蔽により起こる目標(target)の部分的な掩蔽に対してロバスト性を有する。
現在の技術では、マシン・ビジョンないしは機械視覚の「目標の位置特定及び識別(target location and identification)」について多くの異なる例がある。しかしながら、これらはすべて任意の限定された検索領域についての最良の解決手段を提供する傾向がある。本発明の中心は、広範な潜在的な入力画像に含まれる目標の対象にあいまいでないマッチないしは適合を戻す高速画像マッチングエンジンである。データマッチングないしはデータ適合に対するこの特有の試みには、少なくとも目標の対象のある部分がユーザの取得した画像中に見出されるという利点がある。また、識別及び伝送の前に取込装置又はサーバによるデータプロセスを可能とする他の特有のアプローチがある。本検索技術で実行される並行データ比較プロセスは、ひとまとめにして考えると、このプロセスに特有のものである。また、さらなる及び/又は異なる分解パラメータ関数(decomposition parameterization functions)を包含する検索ループの全体構造内で使用されるプロセスの付加的な改良は、限定されない。詳細なプロセスを以下に説明する。図1は全体的なプロセスの流れとステップを示す。これらのステップは以後の段落でさらに詳細に説明する。
画像の取り込み10のために、ユーザ12(図2)はコンピュータ、携帯電話(mobile phone)、携帯情報端末(personal digital assistant)、又はデータセンサ(CCD型やCMOS型のデジタルカメラ)を備える他の同様の装置14を使用する。ユーザ12はデータ取込装置14のセンサの照準を目的の対象16に合わせる。次に、ユーザ12による装置14ないしはセンサのボタンの押下、データが取得されることを自動的に認識する装置14内のソフトウエア、ユーザの音声命令、又は他の適切な手段を含む適切な手段によりリンク処理が開始される。装置14は、それが向けられた光景のデジタル画像18を取得する。この画像18は、入力画像の生のRGB(赤、緑、青)表現に対応した画素の3つの別個の2次元マトリクスとして表現される。この実施形態における分析プロセスを標準化する目的で、装置14がRGBフォーマット以外のフォーマットでデータを供給する場合には、RGBへの変換がなされる。必要があれば、これらの分析はいかなる標準的な色フォーマットにおいても実行することができる。
データ/サーバ20が装置14に対して物理的に分離されていれば、通常のデジタルネットワーク又は無線ネットワーク手段を介して、ユーザが取得した画像が装置14からデータ/サーバ20に送信される。しかしながら、データ/サーバ20へデータを送信する前に、データの取込に使用される装置14がコントラスト強調、ノイズ除去、ぼけ鮮鋭化等のデータプロセスを最初に実行してもよい。このデータプロセスの手順はデータ/サーバ20へのデータの伝送前に実行しても、装置14にサーチ結果が返信された後に実行してもよい。
圧縮アーティファクツないしは圧縮誤差(compression artifacts)が構成されたデータ18に導入するような方法でデータ18が圧縮された場合(例えば、損失のあるJPEG DCT)には、例えば追加の処理の前に再構成されたデータに通常のデスペックルフィルタないしは斑点除去フィルタ(despeckle filter)を適用することで、これらの誤差を部分的に除去してもよい。また、装置14は例えば動画映像(video transmission)のような動画像を伝送してもよい。この動画像は一つ又は複数の静止画像とは独立に又はこれらと関連してサーバに伝送されてもよい。
入力データ18を操作して入力データがバーコード、マトリクスコード、又は英数字のような認識可能なシンボルないしは記号を含むか否かを決定するディスクリミネータ・アルゴリズムないしは認識アルゴリズム(discriminator algorithm)でデータの種類の決定26がなされる。そのような記号が見付け出されれば、データ18は記号の復号28の処理に送られる。ディスクリミネータ・アルゴリズムが記号を見付け出す信頼度(confidence level)に応じて、画像18が目的の対象を含んでいてもよく、あるいは記号に代えて目的の対象を含み、従って画像18を処理フローの対象データの分岐にも送ってもよく、あるいは記号画像の分岐に代えてデータ18が対象画像の分岐に送られる。例えば、入力データ18がバーコードと対象の両方を含んでいれば、バーコードが検出される明瞭度に応じて、データを対象データの分岐と記号データの分岐の両方で分析し、最も高レベルで識別が成功した分岐が対象の識別及び対象からのリンクに使用される。
記号の復号28では、データが分析されて記号の位置、寸法、及び性質が決定されてもよい。記号はそれらの種類に応じて分析され、それらが含む情報が引き出される。例えば、バーコード及び英数字は数字及び/又はテキストの情報となる。
対象画像については、本発明では入力データの分解34において、高解像度の入力データを数個の異なる種類の定量化可能な特徴パラメータ(salient parameter)に「分解(decomposition)」する。これによって多数の独立した収斂性の検索プロセスを並行して行うことができ、データベースとのマッチング36におけるデータの適合ないしはマッチングの速度と、マッチングのロバスト性が大幅に向上する。前述のように、装置14とサーバ20との間でこの動作を任意に分配してもよい。次に、記号の復号28又はデータのデータベースとのマッチング36のいずれか、又は両方に基づく最良のマッチないしは適合38が決定される。特定のURL(又は他のオンラインアドレス)が画像と関連付けられれば、URLのルックアップないしは参照40が実行され、URL返信42においてインターネットアドレスが返信される。また、プロセス中、サーバが情報のアイテムを他の末端の装置(図示せず)に送信してもよい。例えば、雑誌中のテレビ番組表のデータがサーバ20へ伝送されると、サーバがデータをテレビ番組表として認識し、インターネット接続されたテレビに表中のチャンネルに変更する命令を送信してもよい。
入力画像の分解プロセスの全体のフローは以下の通りである。
放射量補正(Radiometric Correction)
セグメンテーション(Segmentation)
セグメントグループの生成(Segment Group Generation)
各セグメントグループについて(For each segment group)
バウンディングボックスの生成(Bounding Box Generation)
幾何正規化(Geometric Normalization)
ウェブレット分解(Wavelet Decomposition)
カラーキューブ分解(Color Cube Decomposition)
形状分解(Shape Decomposition)
低解像度のグレースケール画像の生成(Low-Resolution Grayscale Image Generation)
フォー・エンド(For END)
放射量補正(Radiometric Correction)
セグメンテーション(Segmentation)
セグメントグループの生成(Segment Group Generation)
各セグメントグループについて(For each segment group)
バウンディングボックスの生成(Bounding Box Generation)
幾何正規化(Geometric Normalization)
ウェブレット分解(Wavelet Decomposition)
カラーキューブ分解(Color Cube Decomposition)
形状分解(Shape Decomposition)
低解像度のグレースケール画像の生成(Low-Resolution Grayscale Image Generation)
フォー・エンド(For END)
以下に前記各ステップをさらに詳細に説明する。放射量補正のために、通常、入力画像が色平面毎に8ビットのRGB表現に変換される。このRGB画像はすべての3つのチャンネルにおいて放射量的に(radiometrically)正規化される。この正規化は、リニアゲインとオフセット変換によりなされ、各カラーチャンネル内の画素値は全8ビットのダイナミックレンジ(256の離散値をとり得る。)にわたる。8ビットのダイナミックレンジは十分であるが、光学的取込装置がより高解像度の画像を生成し、コンピュータがより高速化し、かつメモリがより低価格化しているので、16ビット、32ビット、又はそれ以上の高ビットダイナミックレンジを使用してもよい。
セグメンテーションのために、放射量が正規化されたRGB画像が、「セグメント」毎、ないしは同様の色の領域、すなわち赤、緑、及び青について画素値がほぼ等しい領域毎に分析される。これらのセグメントはそれらの境界で画定され、境界は(x,y)点の対の組からなる。セグメント境界のマップが生成され、このマップはRGBの入力画像とは別個に維持され、RGB画像とアスペクト比が等しいx,y境界画像マップにフォーマットが設定される。
セグメントグループの生成のために、セグメントを可能性のあるすべての組み合わせにグループ化する。これらのグループは「セグメントグループ(segment groups)」として知られ、入力画像中の可能性のあるすべての画像ないしは目標の対象を表している。セグメントグループは、それらが評価される順序に基づいて分類される。種々の評価順序の方式が可能である。ここで説明する特定の実施形態は以下の「センターアウト(center-out)」方式を使用する。第1のセグメントグループは画像の中心のセグメントのみを含む。次のセグメントグループは、前のセグメントに加えて(画素数が)最大で前のセグメントに隣接(接触)するセグメントを含む。セグメントがなくなるまで、追加のセグメントがセグメント基準で追加される。新たなセグメントが追加される各ステップで、新たな特有のセグメントグループが生成される。
バウンディングボックスの生成のために、考慮しているセグメントグループの楕円主軸(セグメントグループ全体を含むのに十分な大きさの楕円の主軸)が計算される。次に、画像座標系内で、楕円に主軸に長辺が平行であり、セグメントグループのすべての画素を完全に含むのにちょうど十分な寸法の矩形が構成される。
幾何正規化のために、考慮しているセグメントグループに含まれないすべての画素が中間レベルのグレーに設定されるように、入力画像のコピーを変更する。この結果は再サンプリングされて「標準アスペクト(standard aspect)」の出力テスト画像空間にマッピングされ、バウンディングボックスの隅部がこの出力テスト画像の隅部にマッピングされる。標準アスペクトはデータベースの生成に使用される参照画像と寸法及びアスペクト比が同じである。
ウェブレット分解のために、幾何正規化のステップで得られた幾何的に正規化された画像からフルカラーの画像のグレースケールの表現が生成される。グレースケールの表現を引き出すために以下の手順が使用される。以下の等式を使用して標準補正色画像のR、G、及びBの各画素を比例的に加えることで、3つの色平面を1つのグレースケール画像に低減する。
また、最も近い整数値に四捨五入する。必要であれば、0と255で切り捨てる。得られたマトリクスLは標準グレースケール画像である。このグレースケール表現はフルカラー画像と同じ空間解像度を有し、ダイナミックレンジは8ビットである。グレースケール画像の多重解像度ウェブレット分解が実行され、いくつかの倍率についてウェブレット係数を生じる。種々の倍率のウェブレット係数は画像内でのそれらの重み付けに応じてランク付けされる。
カラーキューブ分解のために、幾何正規化で得られるRGB画像に画像セグメンテーションが実行される(前述の「セグメンテーション」を参照)。次に、RGB画像は正規化された強度(Intensity)、位相(In-phase)、及び直角位相(Quadrature phase)の色空間(YIQ)に変換される。同様の色の画素をセグメント境界が囲んでいるので、セグメントマップが画像の主色領域を識別するために使用される。各セグメントの平均Y、I、及びQ値と、それらの個々の成分の標準偏差が計算される。各セグメントについて色、色の変化、及びサイズないしは寸法を表す以下のパラメータの組が得られる。
Yavg=強度平均
Iavg=位相平均
Qavg=直角位相平均
Ysigma=強度標準偏差
Isigma=位相標準偏差
Qsigma=直角位相標準偏差
Npixels=セグメント中の画素数
Iavg=位相平均
Qavg=直角位相平均
Ysigma=強度標準偏差
Isigma=位相標準偏差
Qsigma=直角位相標準偏差
Npixels=セグメント中の画素数
これらのパラメータは各セグメントにおける色の強度及び変化を含む。あるセグメントグループのすべてのセグメントをひとまとめにして考えると、これらのパラメータは3次元色空間中の点(さらに正確には、標準偏差を考慮すると領域)を含み、セグメントグループ中の色の強度及び変化を表現している。
形状分解のために、カラーキューブ分解のステップで実行されたセグメンテーションで得られたマップが使用され、グループの外縁境界、この境界で囲まれる全領域、及びその領域の図心を引き出すためにセグメントグループが評価される。また、正味楕円率(そのグループに最も近接する楕円の準長軸を準短軸で割る)が決定される。
低解像度のグレースケール画像の生成のために、ウェブレット分解のステップで得られた画像の最大解像度のグレースケール表現についてx及びy方向の係数で副標本を取る。この実施形態の例では、3:1の副標本が考えられる。3×3のセル内の画素の重み付けした平均により、副標本化された画像が生成される。輝度の瓶(bin)の離散(TBD)の数内に含まれるすべての画素に対する「瓶化された平均(binned average)」に基づいて、各画素に割り当て可能な離散値の数を減少させることで、得られた結果がコントラスト瓶化(contrast binned)される。
以上の本実施形態に組み込まれる特定の分解方法の説明は、本発明の範囲で追加の又は代案の分解方法を使用することができないことを示すことを意図するものではない。
換言すれば、以下の通りである。
換言すれば、以下の通りである。
各入力画像のセグメントグループについて(For each input image segment group)
各データベースの対象について(For each database object)
この対象の各ビューについて(For each view of this object)
このデータベースの対象の視像の各セグメントグループについて(For each segment group in this view of this database object)
形状比較(Shape Comparison)
グレースケール比較(Grayscale Comparison)
ウェブレット比較(Wavelet Comparison)
カラーキューブ比較(Color Cube Comparison)
複合化したマッチスコアの計算(Calculate Combined Match Score)
エンド・フォー(END FOR)
エンド・フォー(END FOR)
エンド・フォー(END FOR)
エンド・フォー(END FOR)
各データベースの対象について(For each database object)
この対象の各ビューについて(For each view of this object)
このデータベースの対象の視像の各セグメントグループについて(For each segment group in this view of this database object)
形状比較(Shape Comparison)
グレースケール比較(Grayscale Comparison)
ウェブレット比較(Wavelet Comparison)
カラーキューブ比較(Color Cube Comparison)
複合化したマッチスコアの計算(Calculate Combined Match Score)
エンド・フォー(END FOR)
エンド・フォー(END FOR)
エンド・フォー(END FOR)
エンド・フォー(END FOR)
以下、前記各ステップをさらに詳細に説明する。
各入力画像のセグメントグループについて
このループは、「セグメント生成」のステップに格納された順番で、入力画像のセグメントグループの各組み合わせを考慮する。各セグメントグループは、それが考慮される時は、画像中の目的の対象の候補であり、種々のテストを使用してデータベースの対象と比較される。
このループは、「セグメント生成」のステップに格納された順番で、入力画像のセグメントグループの各組み合わせを考慮する。各セグメントグループは、それが考慮される時は、画像中の目的の対象の候補であり、種々のテストを使用してデータベースの対象と比較される。
このループ内でセグメントグループが考慮される、多くの可能な例のうちの1つの好適な実例は、「セグメントグループの生成」で述べた「センターアウト」アプローチである。この方法では、画像の中心から始まって、セグメントグループに対して隣接するセグメントの追加を行う順番でセグメントグループを考慮する。この方法では、考慮される新たなグループのそれぞれが前のグループに加え1つの追加の隣接する画像セグメントを備える。新たなグループはデータベースと比較される。新たなグループが前のグループよりもデータベースとのマッチングのスコアが高ければ、新たなグループは保持される。新たなグループが前のグループよりもマッチングのスコアが低ければ、新たなグループは放棄されてループが再開する。特定のセグメントグループが特に高度のマッチを示すスコアであれば、このセグメントグループは正確なマッチとみなされ、それ以上の検索は正当化されない。この場合、現在のグループとマッチングするデータベースのグループとがマッチとして選択され、ループが終了する。
各データベースの対象について
このループでは、現在の入力セグメントグループと比較するために、データベースの各対象が考慮される。
このループでは、現在の入力セグメントグループと比較するために、データベースの各対象が考慮される。
この対象の各視像について
このループでは、現在の入力セグメントグループと比較するために、現在のデータベースの対象の各視像が考慮される。データベースは、各対象について、異なる視野角からの複数の視像を含む。
このループでは、現在の入力セグメントグループと比較するために、現在のデータベースの対象の各視像が考慮される。データベースは、各対象について、異なる視野角からの複数の視像を含む。
このデータベースの対象の視像の各セグメントグループについて
このループでは、データベースの対象の現在の視像のセグメントグループの各組み合わせが考慮される。これらのセグメントグループは、入力画像のセグメントグループと同じ方法で生成されている。
このループでは、データベースの対象の現在の視像のセグメントグループの各組み合わせが考慮される。これらのセグメントグループは、入力画像のセグメントグループと同じ方法で生成されている。
形状比較
入力:
入力される画像及び全てのデータベースの画像について:
I.セグメントグループの輪郭
II.セグメントグループの面積
III.セグメントグループの図心位置
IV.セグメントグループのバウンディングの楕円の楕円率
入力:
入力される画像及び全てのデータベースの画像について:
I.セグメントグループの輪郭
II.セグメントグループの面積
III.セグメントグループの図心位置
IV.セグメントグループのバウンディングの楕円の楕円率
アルゴリズム:
V.TBDの範囲内で入力されたセグメントグループと面積がほぼ等しいデータベースのセグメントグループを識別し、「マッチ」のそれぞれについて面積マッチングスコアを計算する。
VI.TBDの範囲内かつ、前のステップで識別されたマッチの組内で、入力されたセグメントグループと楕円率がほぼ等しいデータベースのセグメントのグループを識別し、「マッチ」のそれぞれについて楕円率位置マッチングスコアを計算する。
VII.TBDの範囲内かつ、前のステップで識別されたマッチの組内で、入力されたセグメントグループと図心位置がほぼ等しいデータベースのセグメントグループを識別し、「マッチ」のそれぞれについて図心位置マッチングスコアを計算する。
VIII.TBDの範囲内かつ、前のステップで識別されたマッチの組内で、入力されたセグメントグループと輪郭がほぼ等しいデータベースのセグメントグループを識別し、「マッチ」のそれぞれについて輪郭マッチングスコアを計算する。これは2つの輪郭を比較して、それらが一致する範囲を分析的に決定することによりなされる。
V.TBDの範囲内で入力されたセグメントグループと面積がほぼ等しいデータベースのセグメントグループを識別し、「マッチ」のそれぞれについて面積マッチングスコアを計算する。
VI.TBDの範囲内かつ、前のステップで識別されたマッチの組内で、入力されたセグメントグループと楕円率がほぼ等しいデータベースのセグメントのグループを識別し、「マッチ」のそれぞれについて楕円率位置マッチングスコアを計算する。
VII.TBDの範囲内かつ、前のステップで識別されたマッチの組内で、入力されたセグメントグループと図心位置がほぼ等しいデータベースのセグメントグループを識別し、「マッチ」のそれぞれについて図心位置マッチングスコアを計算する。
VIII.TBDの範囲内かつ、前のステップで識別されたマッチの組内で、入力されたセグメントグループと輪郭がほぼ等しいデータベースのセグメントグループを識別し、「マッチ」のそれぞれについて輪郭マッチングスコアを計算する。これは2つの輪郭を比較して、それらが一致する範囲を分析的に決定することによりなされる。
備考:このアルゴリズムはステップ1から4の順序で実行される必要はない。以下のような代案のプロセスが可能である。
各データベースセグメントグループについて(For each database segment group)
グループがステップ1を通過すれば(If the group passes Step 1)
グループがステップ2を通過すれば(If the group passes Step 2)
グループがステップ3を通過すれば(If the group passes Step 3)
グループがステップ4を通過すれば(If the group passes Step 4)
比較が成功で、結果を保存(Successful comparison, save result)
エンド・イフ(END IF)
エンド・イフ(END IF)
エンド・イフ(END IF)
エンド・イフ(END IF)
エンド・フォー(END FOR)
グループがステップ1を通過すれば(If the group passes Step 1)
グループがステップ2を通過すれば(If the group passes Step 2)
グループがステップ3を通過すれば(If the group passes Step 3)
グループがステップ4を通過すれば(If the group passes Step 4)
比較が成功で、結果を保存(Successful comparison, save result)
エンド・イフ(END IF)
エンド・イフ(END IF)
エンド・イフ(END IF)
エンド・イフ(END IF)
エンド・フォー(END FOR)
グレースケール比較
入力:
入力画像及びすべてのデータベースの画像について
XI.バウンディングボックス内の画素の低解像度で、正規化され、コントラスト瓶化されたグレースケールの画像。セグメントグループの外側の画素は標準の背景色に設定される。
入力:
入力画像及びすべてのデータベースの画像について
XI.バウンディングボックス内の画素の低解像度で、正規化され、コントラスト瓶化されたグレースケールの画像。セグメントグループの外側の画素は標準の背景色に設定される。
アルゴリズム:
低解像度の画像内に一連の同軸な(concentric)矩形の画素の「層(tires)」があれば、入力画像の画素値をデータベースのすべての画像の画素値と比較する。以下のように、各比較について、TBDの範囲内でマッチングスコアを有するデータベースの画像を識別する。
低解像度の画像内に一連の同軸な(concentric)矩形の画素の「層(tires)」があれば、入力画像の画素値をデータベースのすべての画像の画素値と比較する。以下のように、各比較について、TBDの範囲内でマッチングスコアを有するデータベースの画像を識別する。
各データベースの画像について(FOR each database image)
各層について最も内側から始まって最も外側に向けて(For each tier, starting with the innermost and progressing to the outermost)
入力画像とデータベースの画像間で画素値を比較(Compare the pixel values between the input and database image)
マッチングスコアの総計を計算(Calculate an aggregate matching score)
もしマッチングスコアがいくつかのTBD限度よりも大きければ(すなわち、ほとんどマッチしている。)(IF matching score is greater than some TBD limit (i.e., close match))
比較は成功で、結果を保存(Successful comparison, save result)
エンド・イフ(END IF)
エンド・イフ(END IF)
エンド・フォー(END FOR)
各層について最も内側から始まって最も外側に向けて(For each tier, starting with the innermost and progressing to the outermost)
入力画像とデータベースの画像間で画素値を比較(Compare the pixel values between the input and database image)
マッチングスコアの総計を計算(Calculate an aggregate matching score)
もしマッチングスコアがいくつかのTBD限度よりも大きければ(すなわち、ほとんどマッチしている。)(IF matching score is greater than some TBD limit (i.e., close match))
比較は成功で、結果を保存(Successful comparison, save result)
エンド・イフ(END IF)
エンド・イフ(END IF)
エンド・フォー(END FOR)
ウェブレット比較
入力:入力画像及びデータベースのすべての画像について:
X.セグメントグループのバウンディングボックス内の高解像度のグレースケール画像からのウェブレット係数
入力:入力画像及びデータベースのすべての画像について:
X.セグメントグループのバウンディングボックス内の高解像度のグレースケール画像からのウェブレット係数
アルゴリズム:
最低位の係数から初めて最高位の係数へ向けて、入力セグメントグループの画像とデータベースの各セグメントグループの画像のウェブレット係数を連続的に比較する。各比較についてマッチングスコアを比較する。各新たな係数について、TBD限度内の前の(一つ低い位)の係数でマッチングスコアを有していたデータベースのグループのみを考慮する。
最低位の係数から初めて最高位の係数へ向けて、入力セグメントグループの画像とデータベースの各セグメントグループの画像のウェブレット係数を連続的に比較する。各比較についてマッチングスコアを比較する。各新たな係数について、TBD限度内の前の(一つ低い位)の係数でマッチングスコアを有していたデータベースのグループのみを考慮する。
各データベースの画像について(FOR each database image)
TBD限度内で入力画像C0がデータベース画像C0と等しければ(IF input image C0 equals database image C0 within TBD limit)
TBD限度内で入力画像C1がデータベース画像C1と等しければ(IF input image C1 equals database image C1 within TBD limit)
・・・
TBD限度内で入力画像CNがデータベース画像CNと等しければ(IF input image CN equals database image CN within TBD limit)
マッチを終了し、結果とマッチスコアを保存(Close match, save result and match score)
エンド・イフ(END IF)
・・・
エンド・イフ(END IF)
エンド・イフ(END IF)
エンド・フォー(END FOR)
TBD限度内で入力画像C0がデータベース画像C0と等しければ(IF input image C0 equals database image C0 within TBD limit)
TBD限度内で入力画像C1がデータベース画像C1と等しければ(IF input image C1 equals database image C1 within TBD limit)
・・・
TBD限度内で入力画像CNがデータベース画像CNと等しければ(IF input image CN equals database image CN within TBD limit)
マッチを終了し、結果とマッチスコアを保存(Close match, save result and match score)
エンド・イフ(END IF)
・・・
エンド・イフ(END IF)
エンド・イフ(END IF)
エンド・フォー(END FOR)
備考:
I.「C1」は、C0が最低位の係数で、CNが最高位の係数であるウェブレット係数である。
II.係数を比較するとき、算術的差ではなく、統計学的(例えばガウシアン)基準で比較する。
III.Ci値に応じてデータベース画像に速やかにアクセスできるように、データインデックス技術が使用される。これによりアルゴリズムが最低位から最高位に進むのに伴って、目的のデータベースの部分を連続的に絞り込むことができる。
I.「C1」は、C0が最低位の係数で、CNが最高位の係数であるウェブレット係数である。
II.係数を比較するとき、算術的差ではなく、統計学的(例えばガウシアン)基準で比較する。
III.Ci値に応じてデータベース画像に速やかにアクセスできるように、データインデックス技術が使用される。これによりアルゴリズムが最低位から最高位に進むのに伴って、目的のデータベースの部分を連続的に絞り込むことができる。
カラーキューブ比較
入力:
I.入力されるセグメントグループの画像
II.各データベースのセグメントグループの画像
における、各セグメントについて[Yavg,Iavg,Qavg,Ysigma,Qsigma,Npixels]のデータの組(「カラーキューブの点」)
入力:
I.入力されるセグメントグループの画像
II.各データベースのセグメントグループの画像
における、各セグメントについて[Yavg,Iavg,Qavg,Ysigma,Qsigma,Npixels]のデータの組(「カラーキューブの点」)
アルゴリズム:
各データベースの画像について(FOR each database image)
データベースの画像の各セグメントグループについて(FOR each segment group in the database image)
データベースのセグメントグループの各カラーキューブについてNpixelsが減少する順で(FOR each Color Cube Point in database segment group, in order of descending Npiexels value)
入力の(Y,I,Q)とデータベースの(Y,I,Q)との間でガウシアンがマッチすれば(IF Gaussian match between input (Y,I,Q) and database (Y,I,Q))
I.このセグメントについてマッチスコアを計算(Calculate match score for this segment)
II.セグメントについてのマッチスコアの総計にセグメントのマッチスコアを累計(Accumulate segment match score into aggregate match score for segment group)
III.マッチングスコアの総計があるTBD限度より大きければ(すなわち、ほとんどマッチ)(IF aggregate matching score is greater that some TBD limit (i.e., close match))
比較は成功で、結果を保存(Successful comparison, save result)
エンド・イフ(END IF)
エンド・フォー(END FOR)
エンド・フォー(END FOR)
エンド・フォー(END FOR)
終了(END FOR)
各データベースの画像について(FOR each database image)
データベースの画像の各セグメントグループについて(FOR each segment group in the database image)
データベースのセグメントグループの各カラーキューブについてNpixelsが減少する順で(FOR each Color Cube Point in database segment group, in order of descending Npiexels value)
入力の(Y,I,Q)とデータベースの(Y,I,Q)との間でガウシアンがマッチすれば(IF Gaussian match between input (Y,I,Q) and database (Y,I,Q))
I.このセグメントについてマッチスコアを計算(Calculate match score for this segment)
II.セグメントについてのマッチスコアの総計にセグメントのマッチスコアを累計(Accumulate segment match score into aggregate match score for segment group)
III.マッチングスコアの総計があるTBD限度より大きければ(すなわち、ほとんどマッチ)(IF aggregate matching score is greater that some TBD limit (i.e., close match))
比較は成功で、結果を保存(Successful comparison, save result)
エンド・イフ(END IF)
エンド・フォー(END FOR)
エンド・フォー(END FOR)
エンド・フォー(END FOR)
終了(END FOR)
備考:
I.あらゆるY,I,Q点のガウシアンエンベロップは、その点のY、I、及びQの標準偏差のRSSにより決定される。
I.あらゆるY,I,Q点のガウシアンエンベロップは、その点のY、I、及びQの標準偏差のRSSにより決定される。
複合化したマッチスコアの計算
4つの対象の画像の比較(形状比較、グレースケール比較、ウェブレット比較、カラーキューブ比較)はそれぞれ正規化されたマッチングスコアに戻される。データベースの画像に対する入力画像の顕著な特徴のマッチの独立した複数の評価がある。あらゆる単一の比較プロセスにおける不確実性の影響を最小化し、それによって誤ったマッチを返すおそれを最小化するために、現在マッチ=SQRT(WocMoc 2+WCCCMCCC 2+WWCMWC 2+WSGCMSGC 2)という根二乗和の関係を使用して個々の比較の結果が画像のマッチスコアに組み込まれる。WsはTBDパラメータ重み付け係数でMSは4つの異なる比較の個々のマッチスコアである。
4つの対象の画像の比較(形状比較、グレースケール比較、ウェブレット比較、カラーキューブ比較)はそれぞれ正規化されたマッチングスコアに戻される。データベースの画像に対する入力画像の顕著な特徴のマッチの独立した複数の評価がある。あらゆる単一の比較プロセスにおける不確実性の影響を最小化し、それによって誤ったマッチを返すおそれを最小化するために、現在マッチ=SQRT(WocMoc 2+WCCCMCCC 2+WWCMWC 2+WSGCMSGC 2)という根二乗和の関係を使用して個々の比較の結果が画像のマッチスコアに組み込まれる。WsはTBDパラメータ重み付け係数でMSは4つの異なる比較の個々のマッチスコアである。
特有のデータベース検索法とそれに続く対象マッチングスコアが、特別の関心に値する本発明の新規な面である。参照画像と入力画像の領域の個々の分解(decomposition)が画像の顕著な特徴の独立した特性の記述を表している。ウェブレット分解、カラーキューブ分解、形状分解、及び副標本を取った入力画像の低解像度クレースケール評価のすべてが、画像を独立の方法で表現する一組のパラメータを生成する。テストされる画像についてこれら4種類のプロセスのすべてが完了すると、各特性記述(characterization)により供給されるパラメータが、予め計算されてデータベースに記憶されている参照画像の同一の特性記述の結果と比較される。これらの比較ないしは検索は並列で実行される。各検索の結果は、「適合ないしはマッチ(match)」する(すなわち、統計学的に等価である)顕著な特性の数の重み付けされた測定値である、数値スコアである。殆ど等価であることも留意され、累積スコアに計算されるが、重み付けは大幅に低減される。
本発明のデータベース検索方法の新規な側面は、独立の検索が並列に実行されるだけでなく、すべての低解像度グレースケール比較が「収束性(convergent)」である点にある。この収束性は、データベース全体のより小さなサブセットについて入力画像パラメータが連続的に検索されることを意味する。統計的マッチ及びほぼマッチを見付け出すために、すべてのデータベースのレコードにおいて画像からの最大の重み付けを持っているパラメータが最初に比較される。この比較に基づいて、正規化された仮のスコア(例えばゼロから1に縮尺された値で、1は完全なマッチでゼロは全くマッチしないことを示す。)が計算される。次に、許容し得る最小の閾値を上回る初期値の仮のスコアを有するデータベースのレコードについてのみ、入力画像特性記述による重み付けが次に大きいパラメータが検索される。これによって、累積的に仮のスコアに組み込まれてスコアが増加する。次に、前述の累積的なテストの組において同一の許容可能な最小の閾値を上回る仮のスコアの累積を有するデータベースのレコードについてのみ、後続の重み付けが小さくなるパラメータの比較が評価される。
この検索技術によりロバスト性のあるマッチが迅速に完了すると共に、後続の組み合わせマッチ計算(combined match calculation)における制限が確立し、このプロセスの速度が上がる。これらの比較における検索の収束性により、データベース全体のサブセットが順位付けられる。
これらのデータベース比較の個々の結果は、分解検索法の機能としての、各画像のマッチ品質の順位である。許容し得る閾値を上回る最終的な累積スコアを有する画像のみが、次のステップである組み合わせマッチ評価で評価される。
4つのデータベース比較プロセス、すなわち形状比較、グレースケール比較、ウェブレット比較、及びカラーキューブ比較が実行される。これらの処理は連続的に実行してもよいが、一般に並列計算プラットフォームで並列的に実行されることが好ましい。各比較法は、それらの画像のマッチングスコアに従って、特定のアルゴリズムにより画像データベース全体を検索して最良のマッチを与える画像を戻す。これらの比較アルゴリズムはセグメントグループについて実行され、各入力画像のセグメントグループは各データベースの各セグメントグループと比較される。
図3A及び図3Bは、データベースマッチングプロセス中のプロセスフローを示す。こでは最も内側のループ内に4つの並列プロセスを有する4つのネストループを含むものとしてアルゴリズムが表現されている。この構造は提示及び説明のみのためのものである。最も内側の層で同じ操作を実行しているが、現実の実施ないしは実装では、並列計算及びデータインデックス技術のような処理速度向上技術の利益を最大限に達成するために異なる構造を採用することができる。ループ構造は、図3A及び3Bに示すような共用のアプローチではなく、内部の個々の比較について独立に実行できることに留意することが重要である。
好適には、複数のCPU(中央演算処理ユニット)、電話装置14、及び/又はコンピュータ間でタスクを分割するために並列処理が使用される。全体のアルゴリズムを以下のような幾つかの方法で分割することができる。
外側のループの共用:
この方法では、すべてのCPUが外側のループを含むアルゴリズム全体を実行するが、1つのCPUは最小のNサイクルについてループを実行し、次のNサイクルについては残りのCPUが同時に実行する。
この方法では、すべてのCPUが外側のループを含むアルゴリズム全体を実行するが、1つのCPUは最小のNサイクルについてループを実行し、次のNサイクルについては残りのCPUが同時に実行する。
比較の共用:
この方法では、1つのCPUがループ機能を実行する。比較が実行されるときには、各比較は別個のCPUに渡されて並列に実行される。
この方法では、1つのCPUがループ機能を実行する。比較が実行されるときには、各比較は別個のCPUに渡されて並列に実行される。
データベースの共用:
この方法では、CPU間でのデータベース検索の分割を伴い、各CPUがデータベースの1つのセクションの検索を担当し、複数のCPUでセクションが並列に検索される。これは本質的には前記「外側のアルゴリズムの共用」技術の一形態である。
この方法では、CPU間でのデータベース検索の分割を伴い、各CPUがデータベースの1つのセクションの検索を担当し、複数のCPUでセクションが並列に検索される。これは本質的には前記「外側のアルゴリズムの共用」技術の一形態である。
実際の実装では利用可能なハードウエア上でプロセスを最適化する前記技術のいくつかを組み合わせることができる。
速度を最大にするために使用できる他の技術はデータインデキシング(data indexing)である。この技術では、データベースの潜在的にマッチを含む部分を検索するためだめに、データがどこに存するについての「事前」の認識を利用する。ハッシュテーブル、データ区画化(ある値範囲内のデータがある場所に格納される。)、データソーティング、及びデータテーブルインデキシングのような種々の形態のインデキシングを使用することができる。形状比較アルゴリズム(以下参照)におけるそのような技術の例では、値Aの領域全体についてデータベースが検索される場合には、アルゴリズムがこの近似値(approximate value)をどのデータベースが登録しているのか、ないしはどのデータベース領域が有するかを知っており、データベース全体を検索する必要がない。
このように、データベース装置中の複数の対象から対象を特定するために画像の特性を使用し、かつ要求されるすべての目的と利点を充足する、デジタル的に取り込んだ対象の画像から対象を識別する新規な方法とプロセスを示した。本発明の多くの変更、代案、改良、及び他の用途や応用は添付図面と共に明細書を考慮した後には当業者にとって明らかである。本発明の意図及び範囲から離れない限りすべてのそのような変更、代案、及び改良は、請求の範囲のみによって限定される本発明によって保護される。
12 ユーザ
14 装置
18 デジタル画像
20 サーバ
14 装置
18 デジタル画像
20 サーバ
Claims (21)
- 画像を取り込むカメラと、
前記画像の少なくとも一部にデータ処理操作を行ってデータを生成し、このデータをサービスに送信する、ネットワーク対応装置と
を備え、
前記サービスは、前記データを受信し、前記画像内の対象を識別し、種々の種類の目標対象を含む目標対象のデータ特性を記憶しているデータベースを使用して前記画像に存在する対象を他のものから区別し、前記対象を情報のアドレスと関連付け、かつ前記アドレスを前記ネットワーク対応装置に返信するようにプログラムされ、かつ
前記ネットワーク対応装置はさらに、前記対象に関連する情報のアイテムを検索するために前記アドレスを使用するようにプログラムされているシステム。 - 前記ネットワーク対応装置はハンドヘルドコンピュータ又は携帯電話を備える、請求項1に記載のシステム。
- 前記サービスは第2のデータ処理操作を前記画像の少なくとも一部に実行する、請求項1に記載のシステム。
- 前記サービスはさらに、前記画像又は前記データの少なくとも一部に対して多数のアルゴリズムを適用することで前記対象を識別し、かつ前記多数のアルゴリズムの結果と関連付けられた信頼度の関数として前記画像を識別するようにプログラムされている、請求項1に記載のシステム。
- 前記対象はいかなるデータとも符号化されていない、請求項1に記載のシステム。
- 前記画像内に含まれるバーコード又は他の記号の識別を含み、前記サーバは前記バーコード又は他の記号からの情報のアイテムを第2の装置に送信する、請求項1に記載のシステム。
- 前記ネットワーク対応装置に対して遠隔のコンピュータが前記サービスのホストとして機能する、請求項1に記載のシステム。
- 前記サービスはさらに、前記ネットワーク対応装置での表示に適したフォーマットのコンテンツを規定する複数のアドレス間からアドレスを選択するようにプログラムされている、請求項1に記載のシステム。
- 前記情報のアイテムは前記対象に関する商取引を実行するために使用できるデータを含む、請求項1に記載のシステム。
- 前記ネットワーク対応装置はさらに、前記対象に関する商取引を実行するために前記アドレスを使用するようにプログラムされている、請求項1に記載のシステム。
- 前記ネットワーク対応装置はさらに、遠隔のコンピュータのソフトウエアプロセスを開始するために、前記アドレスと前記情報のアイテムのうち少なくとも一つを使用するようにプログラムされている、請求項1に記載のシステム。
- 前記ネットワーク対応装置はさらに、電話通話を開始するために、前記アドレスと前記情報のアイテムのうち少なくとも一つを使用するようにプログラムされている、請求項1に記載のシステム。
- 前記ネットワーク対応装置はさらに、無線通信を開始するために、前記アドレスと前記情報のアイテムのうち少なくとも一つを使用するようにプログラムされている、請求項1に記載のシステム。
- 前記ネットワーク対応装置はさらに、前記サービスから受信したデータをウェブサイトへ送信するために、前記アドレスと前記情報のアイテムのうち少なくとも一つを使用するようにプログラムされている、請求項1に記載のシステム。
- 前記ネットワーク対応装置はさらに、グラフィックスを表示するために前記アドレスの少なくとも一つと前記情報のアイテムを使用するようにプログラムされている、請求項1に記載のシステム。
- 前記ネットワーク対応装置はさらに、可聴音を生成するために、前記アドレスの少なくとも一つと前記情報のアイテムを使用するようにプログラムされている、請求項1に記載のシステム。
- 前記末端のサービスはさらに、前記アドレスの少なくとも一つと前記情報のアイテムから電話通話を開始するようにプログラムされている、請求項1に記載のシステム。
- (a)前記データのプロセスと(b)前記データ中の対象の認識のうちの少なくとも一方が前記装置と前記サーバの間で分配される、請求項1に記載のシステム。
- 前記ネットワーク対応装置は、前記サーバへのビデオ情報を含む動画像を送信する、請求項1に記載のシステム。
- 前記データプロセス動作は、コントラスト強調、ノイズ除去、及びぼけ鮮鋭化からなる群から選択される、請求項1に記載のシステム。
- 前記データプロセス動作が前記対象の識別の前に前記画像に対して適用される、請求項1に記載のシステム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US11/342,094 | 2006-01-26 | ||
US11/342,094 US7565008B2 (en) | 2000-11-06 | 2006-01-26 | Data capture and identification system and process |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012108209A Division JP2012194984A (ja) | 2006-01-26 | 2012-05-10 | データ取得及び識別のためのシステム及び方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2015007992A true JP2015007992A (ja) | 2015-01-15 |
Family
ID=37037463
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006225644A Withdrawn JP2007200275A (ja) | 2006-01-26 | 2006-08-22 | データ取得及び識別のためのシステム及び方法 |
JP2012108209A Withdrawn JP2012194984A (ja) | 2006-01-26 | 2012-05-10 | データ取得及び識別のためのシステム及び方法 |
JP2014162208A Pending JP2015007992A (ja) | 2006-01-26 | 2014-08-08 | データ取得及び識別のためのシステム及び方法 |
Family Applications Before (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006225644A Withdrawn JP2007200275A (ja) | 2006-01-26 | 2006-08-22 | データ取得及び識別のためのシステム及び方法 |
JP2012108209A Withdrawn JP2012194984A (ja) | 2006-01-26 | 2012-05-10 | データ取得及び識別のためのシステム及び方法 |
Country Status (4)
Country | Link |
---|---|
US (11) | US7565008B2 (ja) |
EP (1) | EP1814060A3 (ja) |
JP (3) | JP2007200275A (ja) |
WO (1) | WO2007089533A2 (ja) |
Families Citing this family (96)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7680324B2 (en) | 2000-11-06 | 2010-03-16 | Evryx Technologies, Inc. | Use of image-derived information as search criteria for internet and other search engines |
US9310892B2 (en) | 2000-11-06 | 2016-04-12 | Nant Holdings Ip, Llc | Object information derived from object images |
US8224078B2 (en) | 2000-11-06 | 2012-07-17 | Nant Holdings Ip, Llc | Image capture and identification system and process |
US7565008B2 (en) | 2000-11-06 | 2009-07-21 | Evryx Technologies, Inc. | Data capture and identification system and process |
US7899243B2 (en) | 2000-11-06 | 2011-03-01 | Evryx Technologies, Inc. | Image capture and identification system and process |
US7751805B2 (en) * | 2004-02-20 | 2010-07-06 | Google Inc. | Mobile image-based information retrieval system |
US8370323B2 (en) * | 2004-08-31 | 2013-02-05 | Intel Corporation | Providing information services related to multimodal inputs |
US20070005490A1 (en) * | 2004-08-31 | 2007-01-04 | Gopalakrishnan Kumar C | Methods and System for Distributed E-commerce |
US20070002077A1 (en) * | 2004-08-31 | 2007-01-04 | Gopalakrishnan Kumar C | Methods and System for Providing Information Services Related to Visual Imagery Using Cameraphones |
US7873911B2 (en) * | 2004-08-31 | 2011-01-18 | Gopalakrishnan Kumar C | Methods for providing information services related to visual imagery |
CA2625775A1 (en) | 2005-10-14 | 2007-04-19 | Applied Research Associates Nz Limited | A method of monitoring a surface feature and apparatus therefor |
US8990142B2 (en) | 2009-10-30 | 2015-03-24 | The Nielsen Company (Us), Llc | Distributed audience measurement systems and methods |
US9177381B2 (en) | 2010-12-22 | 2015-11-03 | Nani Holdings IP, LLC | Depth estimate determination, systems and methods |
US9317860B2 (en) | 2011-03-08 | 2016-04-19 | Bank Of America Corporation | Collective network of augmented reality users |
US8611601B2 (en) | 2011-03-08 | 2013-12-17 | Bank Of America Corporation | Dynamically indentifying individuals from a captured image |
US8688559B2 (en) | 2011-03-08 | 2014-04-01 | Bank Of America Corporation | Presenting investment-related information on a mobile communication device |
US9317835B2 (en) | 2011-03-08 | 2016-04-19 | Bank Of America Corporation | Populating budgets and/or wish lists using real-time video image analysis |
US8811711B2 (en) | 2011-03-08 | 2014-08-19 | Bank Of America Corporation | Recognizing financial document images |
US9773285B2 (en) | 2011-03-08 | 2017-09-26 | Bank Of America Corporation | Providing data associated with relationships between individuals and images |
US8922657B2 (en) | 2011-03-08 | 2014-12-30 | Bank Of America Corporation | Real-time video image analysis for providing security |
US8668498B2 (en) | 2011-03-08 | 2014-03-11 | Bank Of America Corporation | Real-time video image analysis for providing virtual interior design |
US8718612B2 (en) | 2011-03-08 | 2014-05-06 | Bank Of American Corporation | Real-time analysis involving real estate listings |
US8660951B2 (en) | 2011-03-08 | 2014-02-25 | Bank Of America Corporation | Presenting offers on a mobile communication device |
US9224166B2 (en) | 2011-03-08 | 2015-12-29 | Bank Of America Corporation | Retrieving product information from embedded sensors via mobile device video analysis |
US8873807B2 (en) | 2011-03-08 | 2014-10-28 | Bank Of America Corporation | Vehicle recognition |
US8571888B2 (en) | 2011-03-08 | 2013-10-29 | Bank Of America Corporation | Real-time image analysis for medical savings plans |
US8929591B2 (en) | 2011-03-08 | 2015-01-06 | Bank Of America Corporation | Providing information associated with an identified representation of an object |
US8438110B2 (en) | 2011-03-08 | 2013-05-07 | Bank Of America Corporation | Conducting financial transactions based on identification of individuals in an augmented reality environment |
US9406031B2 (en) | 2011-03-08 | 2016-08-02 | Bank Of America Corporation | Providing social impact information associated with identified products or businesses |
US8582850B2 (en) | 2011-03-08 | 2013-11-12 | Bank Of America Corporation | Providing information regarding medical conditions |
US8721337B2 (en) | 2011-03-08 | 2014-05-13 | Bank Of America Corporation | Real-time video image analysis for providing virtual landscaping |
US11017897B2 (en) | 2011-03-22 | 2021-05-25 | Nant Holdings Ip, Llc | Healthcare management objects |
US9262719B2 (en) | 2011-03-22 | 2016-02-16 | Patrick Soon-Shiong | Reasoning engines |
US8810598B2 (en) | 2011-04-08 | 2014-08-19 | Nant Holdings Ip, Llc | Interference based augmented reality hosting platforms |
US8538845B2 (en) | 2011-06-03 | 2013-09-17 | Mozido, Llc | Monetary transaction system |
US8744230B2 (en) | 2011-08-12 | 2014-06-03 | Bae Systems Information And Electronic Systems Integration Inc. | Method for real-time correlation of streaming video to geolocation |
WO2013052937A1 (en) | 2011-10-06 | 2013-04-11 | Nant Holdings Ip, Llc | Healthcare object recognition systems and methods |
US10438196B2 (en) | 2011-11-21 | 2019-10-08 | Mozido, Inc. | Using a mobile wallet infrastructure to support multiple mobile wallet providers |
US9805385B2 (en) | 2011-11-21 | 2017-10-31 | Nant Holdings Ip, Llc | Subscription bill service, systems and methods |
US9208488B2 (en) | 2011-11-21 | 2015-12-08 | Mozido, Inc. | Using a mobile wallet infrastructure to support multiple mobile wallet providers |
WO2013078345A1 (en) | 2011-11-21 | 2013-05-30 | Nant Holdings Ip, Llc | Subscription bill service, systems and methods |
US9179844B2 (en) | 2011-11-28 | 2015-11-10 | Aranz Healthcare Limited | Handheld skin measuring or monitoring device |
US8964192B2 (en) * | 2011-12-06 | 2015-02-24 | Ricoh Production Print Solutions LLC | Print verification database mechanism |
ES2687748T3 (es) | 2012-02-24 | 2018-10-29 | Nant Holdings Ip Llc | Activación de contenido por medio de autenticación basada en interacciones, sistemas y método |
US20130271461A1 (en) * | 2012-04-11 | 2013-10-17 | Pinpoint 3D | Systems and methods for obtaining parameters for a three dimensional model from reflectance data |
KR101965136B1 (ko) | 2012-05-24 | 2019-04-03 | 난트 홀딩스 아이피, 엘엘씨 | 이벤트 아카이빙 시스템 및 방법 |
US8988556B1 (en) | 2012-06-15 | 2015-03-24 | Amazon Technologies, Inc. | Orientation-assisted object recognition |
US9336508B2 (en) | 2012-11-02 | 2016-05-10 | Patrick Soon-Shiong | Virtual planogram management, systems, and methods |
EP3617843A1 (en) * | 2012-12-10 | 2020-03-04 | Samsung Electronics Co., Ltd. | Mobile device, control method thereof, and ui display method |
US9728008B2 (en) | 2012-12-10 | 2017-08-08 | Nant Holdings Ip, Llc | Interaction analysis systems and methods |
US9678617B2 (en) | 2013-01-14 | 2017-06-13 | Patrick Soon-Shiong | Shared real-time content editing activated by an image |
US9256661B2 (en) * | 2013-01-15 | 2016-02-09 | International Business Machines Corporation | Indicating level of confidence in digital content |
AU2014219089B2 (en) | 2013-02-25 | 2019-02-14 | Nant Holdings Ip, Llc | Link association analysis systems and methods |
US10564815B2 (en) | 2013-04-12 | 2020-02-18 | Nant Holdings Ip, Llc | Virtual teller systems and methods |
US9355123B2 (en) | 2013-07-19 | 2016-05-31 | Nant Holdings Ip, Llc | Fast recognition algorithm processing, systems and methods |
US9659033B2 (en) * | 2013-08-19 | 2017-05-23 | Nant Holdings Ip, Llc | Metric based recognition, systems and methods |
US10038740B2 (en) | 2013-08-19 | 2018-07-31 | Nant Holdings Ip, Llc | Camera-to-camera interactions, systems and methods |
US9761053B2 (en) | 2013-08-21 | 2017-09-12 | Nantmobile, Llc | Chroma key content management systems and methods |
WO2015027226A1 (en) | 2013-08-23 | 2015-02-26 | Nantmobile, Llc | Recognition-based content management, systems and methods |
SG2013069893A (en) * | 2013-09-13 | 2015-04-29 | Jcs Echigo Pte Ltd | Material handling system and method |
US9582516B2 (en) | 2013-10-17 | 2017-02-28 | Nant Holdings Ip, Llc | Wide area augmented reality location-based services |
US9544655B2 (en) | 2013-12-13 | 2017-01-10 | Nant Holdings Ip, Llc | Visual hash tags via trending recognition activities, systems and methods |
KR101561628B1 (ko) * | 2013-12-30 | 2015-10-20 | 주식회사 케이티 | 스마트 글래스의 영상 정보를 제공하는 검색 장치 및 검색 방법 |
US9501498B2 (en) | 2014-02-14 | 2016-11-22 | Nant Holdings Ip, Llc | Object ingestion through canonical shapes, systems and methods |
WO2015123646A1 (en) | 2014-02-14 | 2015-08-20 | Nant Holdings Ip, Llc | Edge-based recognition, systems and methods |
US9514377B2 (en) | 2014-04-29 | 2016-12-06 | Google Inc. | Techniques for distributed optical character recognition and distributed machine language translation |
US9514376B2 (en) * | 2014-04-29 | 2016-12-06 | Google Inc. | Techniques for distributed optical character recognition and distributed machine language translation |
CN106462747B (zh) | 2014-06-17 | 2020-03-17 | 河谷控股Ip有限责任公司 | 活动识别系统和方法 |
US10185976B2 (en) | 2014-07-23 | 2019-01-22 | Target Brands Inc. | Shopping systems, user interfaces and methods |
US9892560B2 (en) | 2014-09-11 | 2018-02-13 | Nant Holdings Ip, Llc | Marker-based augmented reality authoring tools |
CN104463195B (zh) * | 2014-11-08 | 2018-08-07 | 沈阳工业大学 | 基于模板匹配的印刷体数字识别方法 |
WO2016149463A1 (en) * | 2015-03-17 | 2016-09-22 | Visa International Service Association | Multi-device transaction verification |
US11550387B2 (en) * | 2015-03-21 | 2023-01-10 | Mine One Gmbh | Stereo correspondence search |
WO2016207875A1 (en) | 2015-06-22 | 2016-12-29 | Photomyne Ltd. | System and method for detecting objects in an image |
US10013527B2 (en) | 2016-05-02 | 2018-07-03 | Aranz Healthcare Limited | Automatically assessing an anatomical surface feature and securely managing information related to the same |
US10178101B2 (en) | 2016-06-08 | 2019-01-08 | Bank Of America Corporation | System for creation of alternative path to resource acquisition |
US10291487B2 (en) | 2016-06-08 | 2019-05-14 | Bank Of America Corporation | System for predictive acquisition and use of resources |
US10433196B2 (en) | 2016-06-08 | 2019-10-01 | Bank Of America Corporation | System for tracking resource allocation/usage |
US10581988B2 (en) | 2016-06-08 | 2020-03-03 | Bank Of America Corporation | System for predictive use of resources |
US10129126B2 (en) | 2016-06-08 | 2018-11-13 | Bank Of America Corporation | System for predictive usage of resources |
DK179978B1 (en) * | 2016-09-23 | 2019-11-27 | Apple Inc. | IMAGE DATA FOR ENHANCED USER INTERACTIONS |
JP2018077644A (ja) | 2016-11-08 | 2018-05-17 | 富士ゼロックス株式会社 | 情報処理システム及びプログラム |
CN106454424B (zh) * | 2016-11-10 | 2019-11-26 | 中广热点云科技有限公司 | 热点云管理平台及其方法 |
US11116407B2 (en) | 2016-11-17 | 2021-09-14 | Aranz Healthcare Limited | Anatomical surface assessment methods, devices and systems |
CN106600525A (zh) * | 2016-12-09 | 2017-04-26 | 宇龙计算机通信科技(深圳)有限公司 | 图片模糊处理方法及系统 |
US11903723B2 (en) | 2017-04-04 | 2024-02-20 | Aranz Healthcare Limited | Anatomical surface assessment methods, devices and systems |
US10977624B2 (en) | 2017-04-12 | 2021-04-13 | Bank Of America Corporation | System for generating paper and digital resource distribution documents with multi-level secure authorization requirements |
US10122889B1 (en) | 2017-05-08 | 2018-11-06 | Bank Of America Corporation | Device for generating a resource distribution document with physical authentication markers |
US10621363B2 (en) | 2017-06-13 | 2020-04-14 | Bank Of America Corporation | Layering system for resource distribution document authentication |
US10313480B2 (en) | 2017-06-22 | 2019-06-04 | Bank Of America Corporation | Data transmission between networked resources |
US10524165B2 (en) | 2017-06-22 | 2019-12-31 | Bank Of America Corporation | Dynamic utilization of alternative resources based on token association |
US10511692B2 (en) | 2017-06-22 | 2019-12-17 | Bank Of America Corporation | Data transmission to a networked resource based on contextual information |
WO2019205069A1 (en) * | 2018-04-27 | 2019-10-31 | Beijing Didi Infinity Technology And Development Co., Ltd. | Systems and methods for updating 3d model of building |
CN110245247A (zh) * | 2019-05-24 | 2019-09-17 | 浙江大华技术股份有限公司 | 图片搜索的方法、电子设备和计算机存储介质 |
US11372892B2 (en) * | 2019-10-17 | 2022-06-28 | Optum Health Solutions (UK) Limited | Relational database retrieval procedures for cohort-wise data comparisons |
US11475637B2 (en) | 2019-10-21 | 2022-10-18 | Wormhole Labs, Inc. | Multi-instance multi-user augmented reality environment |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10289243A (ja) * | 1997-04-14 | 1998-10-27 | Casio Comput Co Ltd | データ検索システム |
JP2001101191A (ja) * | 1999-09-27 | 2001-04-13 | Cadix Inc | 画像識別装置及び画像識別に用いられるデータベースシステム |
JP2001282825A (ja) * | 2000-03-29 | 2001-10-12 | Eighting:Kk | 情報検索方法、情報検索サーバーおよび携帯端末 |
JP2003178067A (ja) * | 2001-12-10 | 2003-06-27 | Mitsubishi Electric Corp | 携帯端末型画像処理システム、携帯端末およびサーバ |
JP2003271650A (ja) * | 2002-03-12 | 2003-09-26 | Nec Corp | 携帯電話Webサイト画像検索システム及び方法並びにサーバーとそのプログラム |
JP2004265452A (ja) * | 2004-06-25 | 2004-09-24 | Mitsubishi Electric Corp | 文字認識装置 |
JP2005509219A (ja) * | 2001-11-05 | 2005-04-07 | ウェイン・シー・ボンチック | 画像取込及び識別のためのシステム及び方法 |
Family Cites Families (375)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US3800082A (en) | 1972-10-27 | 1974-03-26 | Nasa | Auditory display for the blind |
JPS6314297A (ja) | 1986-07-03 | 1988-01-21 | オムロン株式会社 | Pos端末装置 |
US4947321A (en) | 1988-04-04 | 1990-08-07 | Stanford Technologies, Inc. | MICR rejects analysis and management information system |
GB8826550D0 (en) | 1988-11-14 | 1989-05-17 | Smiths Industries Plc | Image processing apparatus and methods |
US4991008A (en) | 1988-12-01 | 1991-02-05 | Intec Video Systems, Inc. | Automatic transaction surveillance system |
US5241671C1 (en) | 1989-10-26 | 2002-07-02 | Encyclopaedia Britannica Educa | Multimedia search system using a plurality of entry path means which indicate interrelatedness of information |
US5992752A (en) | 1993-11-24 | 1999-11-30 | Metrologic Instruments, Inc. | Internet-based system for enabling information-related transactions over the internet using Java-enabled internet terminals provided with bar code symbol readers for reading Java-Applet encoded bar code symbols |
US5259037A (en) | 1991-02-07 | 1993-11-02 | Hughes Training, Inc. | Automated video imagery database generation using photogrammetry |
GB9125540D0 (en) | 1991-11-30 | 1992-01-29 | Davies John H E | Access control systems |
US5821523A (en) | 1992-03-12 | 1998-10-13 | Bunte; Alan G. | Combined code reader and digital camera using a common photodetector |
US5579471A (en) | 1992-11-09 | 1996-11-26 | International Business Machines Corporation | Image query system and method |
US5550928A (en) | 1992-12-15 | 1996-08-27 | A.C. Nielsen Company | Audience measurement system and method |
US5815411A (en) | 1993-09-10 | 1998-09-29 | Criticom Corporation | Electro-optic vision system which exploits position and attitude |
JP3108585B2 (ja) | 1993-07-28 | 2000-11-13 | 日本電信電話株式会社 | ビデオ画像プリントアクセス方法およびシステム |
US5625765A (en) | 1993-09-03 | 1997-04-29 | Criticom Corp. | Vision systems including devices and methods for combining images for extended magnification schemes |
US6037936A (en) | 1993-09-10 | 2000-03-14 | Criticom Corp. | Computer vision system with a graphic user interface and remote camera control |
US6278461B1 (en) | 1993-09-10 | 2001-08-21 | Geovector Corporation | Augmented reality vision systems which derive image information from other vision systems |
US6064398A (en) | 1993-09-10 | 2000-05-16 | Geovector Corporation | Electro-optic vision systems |
US7301536B2 (en) | 1993-09-10 | 2007-11-27 | Geovector Corporation | Electro-optic vision systems |
JP3556265B2 (ja) | 1994-03-04 | 2004-08-18 | オリンパス株式会社 | 画像取扱装置及びカメラ |
US5497314A (en) | 1994-03-07 | 1996-03-05 | Novak; Jeffrey M. | Automated apparatus and method for object recognition at checkout counters |
JP3574170B2 (ja) | 1994-03-17 | 2004-10-06 | 富士通株式会社 | 分散型画像処理装置 |
US6522770B1 (en) | 1999-05-19 | 2003-02-18 | Digimarc Corporation | Management of documents and other objects using optical devices |
ES2105936B1 (es) | 1994-03-21 | 1998-06-01 | I D Tec S L | Perfeccionamientos introducidos en la patente de invencion n. p-9400595/8 por: procedimiento biometrico de seguridad y autentificacion de tarjetas de identidad y de credito, visados, pasaportes y reconocimiento facial. |
US6064979A (en) | 1996-10-25 | 2000-05-16 | Ipf, Inc. | Method of and system for finding and serving consumer product related information over the internet using manufacturer identification numbers |
US6866196B1 (en) | 1994-05-25 | 2005-03-15 | Spencer A. Rathus | Method and apparatus for accessing electronic data via a familiar printed medium |
US5594806A (en) | 1994-06-20 | 1997-01-14 | Personnel Identification & Entry Access Control, Inc. | Knuckle profile indentity verification system |
US5742815A (en) | 1994-10-04 | 1998-04-21 | Stern; Yonatan Pesach | Method for storing and retrieving images in/from a database |
US5717940A (en) | 1995-04-28 | 1998-02-10 | Ricoh Company, Ltd. | Method of selecting a target document using features of an example page |
US6202055B1 (en) | 1996-08-21 | 2001-03-13 | Image Data, Llc | Positive identification display device and scanner for low cost collection and display of graphic and text data in a secure manner |
US5657389A (en) | 1995-05-08 | 1997-08-12 | Image Data, Llc | Positive identification system and method |
US5945982A (en) | 1995-05-30 | 1999-08-31 | Minolta Co., Ltd. | Data administration apparatus that can search for desired image data using maps |
US6535210B1 (en) | 1995-06-07 | 2003-03-18 | Geovector Corp. | Vision system computer modeling apparatus including interaction with real scenes with respect to perspective and spatial relationship as measured in real-time |
JPH11507451A (ja) | 1995-06-07 | 1999-06-29 | イー−コム・インコーポレーテッド | 許可されていないアカウントアクセスを検出するシステム |
US5978773A (en) | 1995-06-20 | 1999-11-02 | Neomedia Technologies, Inc. | System and method for using an ordinary article of commerce to access a remote computer |
US6788800B1 (en) | 2000-07-25 | 2004-09-07 | Digimarc Corporation | Authenticating objects using embedded data |
US6650761B1 (en) | 1999-05-19 | 2003-11-18 | Digimarc Corporation | Watermarked business cards and methods |
US6408331B1 (en) | 1995-07-27 | 2002-06-18 | Digimarc Corporation | Computer linking methods using encoded graphics |
US6411725B1 (en) | 1995-07-27 | 2002-06-25 | Digimarc Corporation | Watermark enabled video objects |
JPH10509298A (ja) | 1995-09-15 | 1998-09-08 | インターヴァル リサーチ コーポレイション | 複数のビデオ画像の圧縮方法 |
US6714969B1 (en) | 1995-11-17 | 2004-03-30 | Symbol Technologies, Inc. | Mobile terminal with integrated host application software |
US6405975B1 (en) | 1995-12-19 | 2002-06-18 | The Boeing Company | Airplane ground maneuvering camera system |
JP3743988B2 (ja) | 1995-12-22 | 2006-02-08 | ソニー株式会社 | 情報検索システムおよび方法、並びに情報端末 |
US5862218A (en) | 1996-04-04 | 1999-01-19 | Fotonation, Inc. | Method and apparatus for in-camera image marking and authentication |
US5933823A (en) | 1996-03-01 | 1999-08-03 | Ricoh Company Limited | Image database browsing and query using texture analysis |
JP3279913B2 (ja) | 1996-03-18 | 2002-04-30 | 株式会社東芝 | 人物認証装置、特徴点抽出装置及び特徴点抽出方法 |
US5894323A (en) | 1996-03-22 | 1999-04-13 | Tasc, Inc, | Airborne imaging system using global positioning system (GPS) and inertial measurement unit (IMU) data |
US5893095A (en) | 1996-03-29 | 1999-04-06 | Virage, Inc. | Similarity engine for content-based retrieval of images |
US5804803A (en) | 1996-04-02 | 1998-09-08 | International Business Machines Corporation | Mechanism for retrieving information using data encoded on an object |
GB2312319B (en) | 1996-04-15 | 1998-12-09 | Discreet Logic Inc | Video storage |
US8180844B1 (en) | 2000-03-18 | 2012-05-15 | Digimarc Corporation | System for linking from objects to remote resources |
CA2255932C (en) | 1996-05-22 | 2006-12-19 | Geovector Corporation | Method and apparatus for controlling electrical devices in response to sensed conditions |
US6804726B1 (en) | 1996-05-22 | 2004-10-12 | Geovector Corporation | Method and apparatus for controlling electrical devices in response to sensed conditions |
JPH09330336A (ja) | 1996-06-11 | 1997-12-22 | Sony Corp | 情報処理装置 |
EP0814611B1 (de) | 1996-06-17 | 2002-08-28 | Siemens Aktiengesellschaft | Kommunikationssystem und Verfahren zur Aufnahme und Verwaltung digitaler Bilder |
CA2230076A1 (en) | 1996-06-21 | 1997-12-24 | Norand Corporation | Code reader performing coded image decoding |
US5917930A (en) | 1996-07-31 | 1999-06-29 | Currency Systems International | Method for semi-continuous currency processing using separator cards |
JPH1091634A (ja) | 1996-08-15 | 1998-04-10 | Hewlett Packard Co <Hp> | 写真画像検索システム |
US5915038A (en) | 1996-08-26 | 1999-06-22 | Philips Electronics North America Corporation | Using index keys extracted from JPEG-compressed images for image retrieval |
US5768633A (en) | 1996-09-03 | 1998-06-16 | Eastman Kodak Company | Tradeshow photographic and data transmission system |
US6819783B2 (en) | 1996-09-04 | 2004-11-16 | Centerframe, Llc | Obtaining person-specific images in a public venue |
US6754636B1 (en) * | 1996-09-04 | 2004-06-22 | Walker Digital, Llc | Purchasing systems and methods wherein a buyer takes possession at a retailer of a product purchased using a communication network |
US6526158B1 (en) | 1996-09-04 | 2003-02-25 | David A. Goldberg | Method and system for obtaining person-specific images in a public venue |
DE19636028C1 (de) | 1996-09-05 | 1997-11-20 | Daimler Benz Ag | Verfahren zur Stereobild-Objektdetektion |
US7711598B2 (en) | 1996-10-25 | 2010-05-04 | Ipf, Inc. | Web-based consumer product marketing communication network for managing and delivering consumer product marketing communications to consumers along e-commerce (EC) enabled web sites on the world wide web (WWW), using multi-mode virtual kiosks (MMVKS) driven by server=side components embodying consumer product identifiers and driven by consumer product information (CPI) links managed by product manufacturer team members and/or their agents |
JPH10134004A (ja) | 1996-10-28 | 1998-05-22 | Casio Comput Co Ltd | 画像データ処理システム |
US5933829A (en) | 1996-11-08 | 1999-08-03 | Neomedia Technologies, Inc. | Automatic access of electronic information through secure machine-readable codes on printed documents |
US6243375B1 (en) | 1996-11-08 | 2001-06-05 | Gregory J. Speicher | Internet-audiotext electronic communications system with multimedia based matching |
DE19701157C1 (de) | 1997-01-15 | 1998-04-09 | Peter Heller Gmbh | Vorrichtung zum Überziehen von Lebensmitteln mit Soße |
US5768663A (en) | 1997-01-29 | 1998-06-16 | Lin; Bob | Light source arrangement of a scanner |
US6145738A (en) | 1997-02-06 | 2000-11-14 | Mr. Payroll Corporation | Method and apparatus for automatic check cashing |
CA2229374A1 (en) | 1997-02-13 | 1998-08-13 | Tatra Corporation | Buckle for cargo control strap |
US6081612A (en) | 1997-02-28 | 2000-06-27 | Electro Optical Sciences Inc. | Systems and methods for the multispectral imaging and characterization of skin tissue |
WO1998037811A1 (en) | 1997-02-28 | 1998-09-03 | Electro-Optical Sciences, Inc. | Systems and methods for the multispectral imaging and characterization of skin tissue |
US6307957B1 (en) | 1997-02-28 | 2001-10-23 | Electro-Optical Sciences Inc | Multispectral imaging and characterization of biological tissue |
WO1998046323A1 (en) | 1997-04-15 | 1998-10-22 | Criticom Corporation | Computer games having optically acquired images which are combined with computer generated graphics and images |
MXPA99010114A (es) | 1997-05-07 | 2004-09-10 | Neomedia Tech Inc | Unidad de control remotomejorado con escaner y sistema para enllazar automaticamente a recursos enlinea. |
US6597818B2 (en) | 1997-05-09 | 2003-07-22 | Sarnoff Corporation | Method and apparatus for performing geo-spatial registration of imagery |
EP0983661A1 (en) | 1997-05-09 | 2000-03-08 | Neomedia Technologies, Inc | Method and system for accessing electronic resources via machine-readable data on intelligent documents |
US6061478A (en) | 1997-05-21 | 2000-05-09 | Ricoh Company, Ltd. | Content-based filing and retrieval system for name cards and hankos |
US5897625A (en) | 1997-05-30 | 1999-04-27 | Capital Security Systems, Inc. | Automated document cashing system |
GB9714720D0 (en) | 1997-07-14 | 2001-03-14 | British Aerospace | Inertial navigation accuracy enhancement |
US6064335A (en) | 1997-07-21 | 2000-05-16 | Trimble Navigation Limited | GPS based augmented reality collision avoidance system |
US6208353B1 (en) | 1997-09-05 | 2001-03-27 | ECOLE POLYTECHNIQUE FEDéRALE DE LAUSANNE | Automated cartographic annotation of digital images |
US6317544B1 (en) | 1997-09-25 | 2001-11-13 | Raytheon Company | Distributed mobile biometric identification system with a centralized server and mobile workstations |
US6181817B1 (en) | 1997-11-17 | 2001-01-30 | Cornell Research Foundation, Inc. | Method and system for comparing data objects using joint histograms |
US6396537B1 (en) | 1997-11-24 | 2002-05-28 | Eastman Kodak Company | Photographic system for enabling interactive communication between a camera and an attraction site |
JPH11167532A (ja) | 1997-12-02 | 1999-06-22 | Canon Inc | データ加工システムおよび装置、データ加工方法、記録媒体 |
US6173070B1 (en) | 1997-12-30 | 2001-01-09 | Cognex Corporation | Machine vision method using search models to find features in three dimensional images |
US6072904A (en) | 1997-12-31 | 2000-06-06 | Philips Electronics North America Corp. | Fast image retrieval using multi-scale edge representation of images |
US5970473A (en) | 1997-12-31 | 1999-10-19 | At&T Corp. | Video communication device providing in-home catalog services |
JP3748164B2 (ja) | 1998-02-06 | 2006-02-22 | 富士通株式会社 | パターン抽出装置 |
WO1999042947A2 (en) | 1998-02-18 | 1999-08-26 | Geovector Corporation | Apparatus and methods for presentation of information relating to objects being addressed |
US6038333A (en) | 1998-03-16 | 2000-03-14 | Hewlett-Packard Company | Person identifier and management system |
JPH11265391A (ja) | 1998-03-17 | 1999-09-28 | Nippon Telegr & Teleph Corp <Ntt> | 情報検索装置 |
US6567122B1 (en) | 1998-03-18 | 2003-05-20 | Ipac Acquisition Subsidiary I | Method and system for hosting an internet web site on a digital camera |
US6393147B2 (en) | 1998-04-13 | 2002-05-21 | Intel Corporation | Color region based recognition of unidentified objects |
US7686213B1 (en) | 1998-04-17 | 2010-03-30 | Diebold Self-Service Systems Division Of Diebold, Incorporated | Cash withdrawal from ATM via videophone |
GB9809986D0 (en) | 1998-05-12 | 1998-07-08 | Univ Manchester | Visualising images |
US6504571B1 (en) | 1998-05-18 | 2003-01-07 | International Business Machines Corporation | System and methods for querying digital image archives using recorded parameters |
CN1105017C (zh) | 1998-05-21 | 2003-04-09 | 佳能株式会社 | 用色素不溶化的墨水打印的墨水打印方法及喷墨打印装置 |
US6404900B1 (en) | 1998-06-22 | 2002-06-11 | Sharp Laboratories Of America, Inc. | Method for robust human face tracking in presence of multiple persons |
US6285995B1 (en) | 1998-06-22 | 2001-09-04 | U.S. Philips Corporation | Image retrieval system using a query image |
US6615183B1 (en) | 1998-07-20 | 2003-09-02 | Usa Technologies, Inc. | Method of warehousing user data entered at an electronic commerce terminal |
US6037963A (en) | 1998-07-28 | 2000-03-14 | Lexmark International, Inc. | Laser printer having variable beam spacing |
EP1496455A1 (en) | 1998-07-31 | 2005-01-12 | Sony Corporation | An information processing apparatus and method |
EP0984349B1 (en) | 1998-08-31 | 2008-11-05 | Sony Corporation | Image processing |
US6711278B1 (en) * | 1998-09-10 | 2004-03-23 | Microsoft Corporation | Tracking semantic objects in vector image sequences |
US6956593B1 (en) * | 1998-09-15 | 2005-10-18 | Microsoft Corporation | User interface for creating, viewing and temporally positioning annotations for media content |
US6522772B1 (en) | 1998-09-30 | 2003-02-18 | Ncr Corporation | Self-service checkout terminal having a biometric sensing device for verifying identity of a user and associated method |
US6173239B1 (en) | 1998-09-30 | 2001-01-09 | Geo Vector Corporation | Apparatus and methods for presentation of information relating to objects being addressed |
US7533805B1 (en) | 1998-10-09 | 2009-05-19 | Diebold, Incorporated | Data bearing record based capture and correlation of user image data at a card reading banking system machine |
US6583813B1 (en) | 1998-10-09 | 2003-06-24 | Diebold, Incorporated | System and method for capturing and searching image data associated with transactions |
US6445834B1 (en) | 1998-10-19 | 2002-09-03 | Sony Corporation | Modular image query system |
US6256409B1 (en) | 1998-10-19 | 2001-07-03 | Sony Corporation | Method for determining a correlation between images using multi-element image descriptors |
US6134548A (en) | 1998-11-19 | 2000-10-17 | Ac Properties B.V. | System, method and article of manufacture for advanced mobile bargain shopping |
US6446076B1 (en) | 1998-11-12 | 2002-09-03 | Accenture Llp. | Voice interactive web-based agent system responsive to a user location for prioritizing and formatting information |
US6532298B1 (en) | 1998-11-25 | 2003-03-11 | Iridian Technologies, Inc. | Portable authentication device and method using iris patterns |
US6208933B1 (en) | 1998-12-04 | 2001-03-27 | Northrop Grumman Corporation | Cartographic overlay on sensor video |
US6396963B2 (en) | 1998-12-29 | 2002-05-28 | Eastman Kodak Company | Photocollage generation and modification |
US6691914B2 (en) | 1999-01-25 | 2004-02-17 | Airclic, Inc. | Method and system for directing end user to network location of provider based on user-provided codes |
US6411953B1 (en) | 1999-01-25 | 2002-06-25 | Lucent Technologies Inc. | Retrieval and matching of color patterns based on a predetermined vocabulary and grammar |
EP1192563B1 (en) | 1999-02-01 | 2007-12-19 | Neomedia Technologies, Inc. | Interactive system for investing products on a network |
US6651053B1 (en) | 1999-02-01 | 2003-11-18 | Barpoint.Com, Inc. | Interactive system for investigating products on a network |
US7230582B1 (en) | 1999-02-12 | 2007-06-12 | Fisher-Rosemount Systems, Inc. | Wearable computer in a process control environment |
US6317718B1 (en) | 1999-02-26 | 2001-11-13 | Accenture Properties (2) B.V. | System, method and article of manufacture for location-based filtering for shopping agent in the physical world |
US6578017B1 (en) | 1999-02-26 | 2003-06-10 | Information Decision Technologies, Llc | Method to aid object detection in images by incorporating contextual information |
US7324081B2 (en) | 1999-03-02 | 2008-01-29 | Siemens Aktiengesellschaft | Augmented-reality system for situation-related support of the interaction between a user and an engineering apparatus |
JP2000287072A (ja) | 1999-03-31 | 2000-10-13 | Sony Corp | 画像加工処理システム、画像加工処理装置、画像加工処理方法、媒体及び携帯情報端末装置 |
CA2368556C (en) | 1999-04-05 | 2010-12-21 | Neomedia Technologies, Inc. | System and method of using machine-readable or human-readable linkage codes for accessing networked data resources |
JP2000293696A (ja) | 1999-04-07 | 2000-10-20 | Matsushita Electric Ind Co Ltd | 画像認識装置 |
GB2349460B (en) | 1999-04-29 | 2002-11-27 | Mitsubishi Electric Inf Tech | Method of representing colour images |
US6674993B1 (en) * | 1999-04-30 | 2004-01-06 | Microvision, Inc. | Method and system for identifying data locations associated with real world observations |
US7062454B1 (en) | 1999-05-06 | 2006-06-13 | Jarbridge, Inc. | Previewing system and method |
US6510238B2 (en) | 1999-05-13 | 2003-01-21 | Currency Systems International, Inc. | Partial OCR note confirmation methods |
US7206820B1 (en) | 2000-03-18 | 2007-04-17 | Digimarc Corporation | System for linking from object to remote resource |
US7143949B1 (en) | 2000-04-05 | 2006-12-05 | Digimarc Corporation | Internet-linking scanner |
US7760905B2 (en) | 1999-06-29 | 2010-07-20 | Digimarc Corporation | Wireless mobile phone with content processing |
US6591884B1 (en) | 1999-05-25 | 2003-07-15 | Silverbrook Research Pty Ltd | Printed media production |
AUPQ439299A0 (en) | 1999-12-01 | 1999-12-23 | Silverbrook Research Pty Ltd | Interface system |
JP2003501635A (ja) | 1999-05-26 | 2003-01-14 | ローベルト ボッシュ ゲゼルシャフト ミット ベシュレンクテル ハフツング | 対象検出システム |
US6502756B1 (en) | 1999-05-28 | 2003-01-07 | Anoto Ab | Recording of information |
GB2391677B (en) | 1999-07-05 | 2004-05-12 | Mitsubishi Electric Inf Tech | Method and apparatus for representing and searching for an object in an image |
US6563959B1 (en) | 1999-07-30 | 2003-05-13 | Pixlogic Llc | Perceptual similarity image retrieval method |
US20080243721A1 (en) | 1999-08-24 | 2008-10-02 | Raymond Anthony Joao | Apparatus and method for providing financial information and/or investment information |
US6396475B1 (en) | 1999-08-27 | 2002-05-28 | Geo Vector Corp. | Apparatus and methods of the remote address of objects |
US7502759B2 (en) | 1999-08-30 | 2009-03-10 | Digimarc Corporation | Digital watermarking methods and related toy and game applications |
WO2001017298A1 (en) | 1999-09-02 | 2001-03-08 | Automated Business Companies | Communication and proximity authorization systems |
US6601026B2 (en) | 1999-09-17 | 2003-07-29 | Discern Communications, Inc. | Information retrieval by natural language querying |
JP2001092813A (ja) | 1999-09-21 | 2001-04-06 | Matsushita Graphic Communication Systems Inc | デジタル複合機及びこれに接続されるデータ端末装置 |
US6974078B1 (en) | 1999-09-28 | 2005-12-13 | Yahoo! Inc. | Personal communication device with bar code reader for obtaining product information from multiple databases |
US7224995B2 (en) | 1999-11-03 | 2007-05-29 | Digimarc Corporation | Data entry method and system |
GB2356511B (en) | 1999-11-18 | 2004-06-23 | Hewlett Packard Co | Information capture and processing |
AU1807101A (en) | 1999-11-29 | 2001-06-04 | Neomedia Technologies, Inc. | System and method for linking online resources to print media and authoring toolfor same |
JP2001160057A (ja) | 1999-12-03 | 2001-06-12 | Nippon Telegr & Teleph Corp <Ntt> | 画像の階層的分類方法、および画像の分類・検索装置、およびこの方法を実行するプログラムを記録した記録媒体 |
US6950800B1 (en) | 1999-12-22 | 2005-09-27 | Eastman Kodak Company | Method of permitting group access to electronically stored images and transaction card used in the method |
US6522889B1 (en) | 1999-12-23 | 2003-02-18 | Nokia Corporation | Method and apparatus for providing precise location information through a communications network |
US6771294B1 (en) | 1999-12-29 | 2004-08-03 | Petri Pulli | User interface |
WO2001050428A1 (en) | 2000-01-05 | 2001-07-12 | Colin Mitchell | Method and apparatus for authenticating financial transactions |
US6992655B2 (en) | 2000-02-18 | 2006-01-31 | Anoto Ab | Input unit arrangement |
US6522292B1 (en) | 2000-02-23 | 2003-02-18 | Geovector Corp. | Information systems having position measuring capacity |
US6675165B1 (en) | 2000-02-28 | 2004-01-06 | Barpoint.Com, Inc. | Method for linking a billboard or signage to information on a global computer network through manual information input or a global positioning system |
US6766363B1 (en) | 2000-02-28 | 2004-07-20 | Barpoint.Com, Inc. | System and method of linking items in audio, visual, and printed media to related information stored on an electronic network using a mobile device |
GB2366033B (en) | 2000-02-29 | 2004-08-04 | Ibm | Method and apparatus for processing acquired data and contextual information and associating the same with available multimedia resources |
JP3946927B2 (ja) | 2000-03-09 | 2007-07-18 | 株式会社東芝 | 目標判定システム及び判定方法 |
JP2001265970A (ja) | 2000-03-16 | 2001-09-28 | Laurel Intelligent Systems Co Ltd | 2次元コードを用いた商品、サービスの取引情報処理システム |
WO2001071282A1 (en) | 2000-03-16 | 2001-09-27 | Geovector Corporation | Information systems having directional interference facility |
SE0000949L (sv) | 2000-03-21 | 2001-09-22 | Anoto Ab | Positionsinformation |
US6658389B1 (en) | 2000-03-24 | 2003-12-02 | Ahmet Alpdemir | System, method, and business model for speech-interactive information system having business self-promotion, audio coupon and rating features |
US6674923B1 (en) | 2000-03-28 | 2004-01-06 | Eastman Kodak Company | Method and system for locating and accessing digitally stored images |
US6865608B2 (en) | 2000-03-31 | 2005-03-08 | Neomedia Technologies, Inc. | Method and system for simplified access to internet content on a wireless device |
US7050653B2 (en) | 2000-04-05 | 2006-05-23 | Anoto Ab | Identification of virtual raster pattern |
JP3678404B2 (ja) | 2000-05-12 | 2005-08-03 | 株式会社東芝 | 映像情報処理装置 |
KR20010110532A (ko) | 2000-06-07 | 2001-12-13 | 김점두 | 바코드에 의한 제품의 생산배경 식별방법 |
US7599847B2 (en) | 2000-06-09 | 2009-10-06 | Airport America | Automated internet based interactive travel planning and management system |
US6572377B2 (en) | 2000-06-09 | 2003-06-03 | Cynthia H. Masters | Computerized interior design expert system |
US7526440B2 (en) | 2000-06-12 | 2009-04-28 | Walker Digital, Llc | Method, computer product, and apparatus for facilitating the provision of opinions to a shopper from a panel of peers |
US20010053252A1 (en) | 2000-06-13 | 2001-12-20 | Stuart Creque | Method of knowledge management and information retrieval utilizing natural characteristics of published documents as an index method to a digital content store |
JP2002007432A (ja) | 2000-06-23 | 2002-01-11 | Ntt Docomo Inc | 情報検索システム |
JP4624594B2 (ja) | 2000-06-28 | 2011-02-02 | パナソニック株式会社 | 物体認識方法および物体認識装置 |
US7353182B1 (en) | 2000-06-30 | 2008-04-01 | Accenture Llp | System and method for providing a multi-channel customer interaction center |
US8255291B1 (en) | 2000-08-18 | 2012-08-28 | Tensilrus Capital Nv Llc | System, method and apparatus for interactive and comparative shopping |
AU2001285231A1 (en) * | 2000-08-24 | 2002-03-04 | Jacob Gil | A method and system for automatically connecting real-world entities directly tocorresponding network-based data sources or services |
US8010988B2 (en) | 2000-09-14 | 2011-08-30 | Cox Ingemar J | Using features extracted from an audio and/or video work to obtain information about the work |
US7058223B2 (en) | 2000-09-14 | 2006-06-06 | Cox Ingemar J | Identifying works for initiating a work-based action, such as an action on the internet |
US7016899B1 (en) | 2000-09-21 | 2006-03-21 | Lenovo (Singapore) Pte. Ltd. | Camera device, methods and program products for location and environmental stamping of images, communications and other applications |
WO2002033472A2 (de) | 2000-10-07 | 2002-04-25 | Physoptics Opto-Electronic Gmbh | Informationssystem und verfahren zum zurverfügungstellen von informationen unter verwendung eines holographischen elements |
AU2002215929A1 (en) | 2000-10-07 | 2002-04-22 | Physoptics Opto-Electronic Gmbh | Device and method for determining the orientation of an eye |
DE10050486A1 (de) | 2000-10-12 | 2002-04-18 | Giesecke & Devrient Gmbh | Vorrichtung und Verfahren zur Bearbeitung von Blattgut |
AU2002225593A1 (en) | 2000-10-17 | 2002-04-29 | Digimarc Corporation | User control and activation of watermark enabled objects |
KR20020031015A (ko) | 2000-10-21 | 2002-04-26 | 오길록 | 에지 히스토그램 빈의 비선형 양자화 및 유사도 계산 |
US20020048403A1 (en) | 2000-10-24 | 2002-04-25 | Electronic Warfare Associates, Inc | Mark recognition system and method for identification of one or more marks on an object |
US6453361B1 (en) | 2000-10-27 | 2002-09-17 | Ipac Acquisition Subsidiary I, Llc | Meta-application architecture for integrating photo-service websites |
KR100516289B1 (ko) | 2000-11-02 | 2005-09-21 | 주식회사 케이티 | 퍼지 적분을 이용하여 사용자 의견을 반영한 내용기반영상 검색 장치 및 그 방법 |
US20040080530A1 (en) | 2000-11-03 | 2004-04-29 | Lee Joseph H. | Portable wardrobe previewing device |
US7680324B2 (en) | 2000-11-06 | 2010-03-16 | Evryx Technologies, Inc. | Use of image-derived information as search criteria for internet and other search engines |
US8130242B2 (en) | 2000-11-06 | 2012-03-06 | Nant Holdings Ip, Llc | Interactivity via mobile image recognition |
US7565008B2 (en) * | 2000-11-06 | 2009-07-21 | Evryx Technologies, Inc. | Data capture and identification system and process |
US20020102966A1 (en) | 2000-11-06 | 2002-08-01 | Lev Tsvi H. | Object identification method for portable devices |
US8224078B2 (en) | 2000-11-06 | 2012-07-17 | Nant Holdings Ip, Llc | Image capture and identification system and process |
US8218873B2 (en) * | 2000-11-06 | 2012-07-10 | Nant Holdings Ip, Llc | Object information derived from object images |
US8817045B2 (en) | 2000-11-06 | 2014-08-26 | Nant Holdings Ip, Llc | Interactivity via mobile image recognition |
US7167164B2 (en) | 2000-11-10 | 2007-01-23 | Anoto Ab | Recording and communication of handwritten information |
US7333947B2 (en) | 2000-11-13 | 2008-02-19 | Anoto Ab | Network-based system |
US8954432B2 (en) | 2000-11-15 | 2015-02-10 | Mark Frigon | Users tagging users in photos online |
US7113867B1 (en) | 2000-11-26 | 2006-09-26 | Mobileye Technologies Limited | System and method for detecting obstacles to vehicle motion and determining time to contact therewith using sequences of images |
US6842181B2 (en) | 2000-11-27 | 2005-01-11 | Intel Corporation | Euler vector for color images |
JP4095243B2 (ja) | 2000-11-28 | 2008-06-04 | キヤノン株式会社 | Url取得および処理システムおよびその方法およびその処理を実行するプログラムを記憶した記憶媒体。 |
JP3898440B2 (ja) | 2000-12-22 | 2007-03-28 | 株式会社エヌ・ティ・ティ・ドコモ | 情報提供システム |
JP2002207774A (ja) | 2001-01-10 | 2002-07-26 | Nec Corp | インターネット動画リンクシステム |
US6963667B2 (en) | 2001-01-12 | 2005-11-08 | National Instruments Corporation | System and method for signal matching and characterization |
US6968453B2 (en) | 2001-01-17 | 2005-11-22 | International Business Machines Corporation | Secure integrated device with secure, dynamically-selectable capabilities |
US7031875B2 (en) | 2001-01-24 | 2006-04-18 | Geo Vector Corporation | Pointing systems for addressing objects |
AU2002235412A1 (en) | 2001-01-30 | 2002-08-12 | The Robert Allen Group | Method and system for product selection |
DE10103922A1 (de) | 2001-01-30 | 2002-08-01 | Physoptics Opto Electronic Gmb | Interaktives Datensicht- und Bediensystem |
US20020124188A1 (en) | 2001-02-20 | 2002-09-05 | Vipadvisor.Com, Inc. | Computing environment for facilitating collaboration between professional service providers and their clients |
US6765569B2 (en) | 2001-03-07 | 2004-07-20 | University Of Southern California | Augmented-reality tool employing scene-feature autocalibration during camera motion |
WO2002073818A1 (en) | 2001-03-13 | 2002-09-19 | Geovector Corporation | Systems for providing point-to-call functionality |
JP2002269350A (ja) | 2001-03-14 | 2002-09-20 | Hitachi Ltd | 取引決済方法、取引決済システム並びにそれに用いる携帯通信端末及び加盟店用決済端末 |
US7305354B2 (en) | 2001-03-20 | 2007-12-04 | Lightsurf,Technologies, Inc. | Media asset management system |
GB2374225A (en) | 2001-03-28 | 2002-10-09 | Hewlett Packard Co | Camera for recording linked information associated with a recorded image |
JP2002297648A (ja) | 2001-03-29 | 2002-10-11 | Minolta Co Ltd | 情報検索装置、情報検索プログラム及び記録媒体 |
JP2004534963A (ja) | 2001-03-30 | 2004-11-18 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 強化現実のための方法、システム及び装置 |
AU2002311561A1 (en) | 2001-04-03 | 2002-10-21 | Ofer Bar-Or | A method for selective image acquisition and transmission |
US6738630B2 (en) | 2001-04-10 | 2004-05-18 | Knowtate, Inc. | Combining markers with location information to deliver domain-specific content to mobile devices |
US6822648B2 (en) | 2001-04-17 | 2004-11-23 | Information Decision Technologies, Llc | Method for occlusion of movable objects and people in augmented reality scenes |
US6993594B2 (en) | 2001-04-19 | 2006-01-31 | Steven Schneider | Method, product, and apparatus for requesting a resource from an identifier having a character image |
JP2002334092A (ja) | 2001-05-11 | 2002-11-22 | Hitachi Ltd | 情報関連付け方法、情報閲覧装置、情報登録装置、情報検索装置、課金方法、およびプログラム |
WO2002095554A2 (en) | 2001-05-18 | 2002-11-28 | Imprivata Inc. | System and method for authentication using biometrics |
GB2377147A (en) | 2001-06-27 | 2002-12-31 | Nokia Corp | A virtual reality user interface |
US7127679B2 (en) * | 2001-06-29 | 2006-10-24 | Softrek, Inc. | Method for generating and navigating a plurality of menus using a database and a menu template |
US7266545B2 (en) | 2001-08-07 | 2007-09-04 | International Business Machines Corporation | Methods and apparatus for indexing in a database and for retrieving data from a database in accordance with queries using example sets |
JP4240859B2 (ja) | 2001-09-05 | 2009-03-18 | 株式会社日立製作所 | 携帯端末装置及び通信システム |
US7175095B2 (en) | 2001-09-13 | 2007-02-13 | Anoto Ab | Coding pattern |
JP3984886B2 (ja) | 2001-09-28 | 2007-10-03 | キヤノン株式会社 | データ変換装置、データ変換方法、コンピュータプログラム、記憶媒体 |
US20030064705A1 (en) | 2001-10-02 | 2003-04-03 | Desiderio Piero L. | Communication of real estate information utilizing moving map GPS and wireless telecommunications to access MLS and other property specific information from remote databases |
US6724914B2 (en) | 2001-10-16 | 2004-04-20 | Digimarc Corporation | Progressive watermark decoding on a distributed computing platform |
US7433844B2 (en) | 2001-11-05 | 2008-10-07 | Diebold, Incorporated | Automated banking machine currency tracking method |
US20030095681A1 (en) | 2001-11-21 | 2003-05-22 | Bernard Burg | Context-aware imaging device |
US7797204B2 (en) | 2001-12-08 | 2010-09-14 | Balent Bruce F | Distributed personal automation and shopping method, apparatus, and process |
JP3979834B2 (ja) | 2001-12-13 | 2007-09-19 | 富士フイルム株式会社 | 画像データベース装置およびその動作制御方法 |
US6641037B2 (en) | 2001-12-13 | 2003-11-04 | Peter Williams | Method and system for interactively providing product related information on demand and providing personalized transactional benefits at a point of purchase |
US7394346B2 (en) | 2002-01-15 | 2008-07-01 | International Business Machines Corporation | Free-space gesture recognition for transaction security and command processing |
JP3893983B2 (ja) | 2002-01-17 | 2007-03-14 | ソニー株式会社 | 情報提供装置及び情報提供方法、記憶媒体、並びにコンピュータ・プログラム |
US8573486B2 (en) | 2010-10-13 | 2013-11-05 | Square, Inc. | Systems and methods for financial transaction through miniaturized card reader with confirmation of payment sent to buyer |
US20030164819A1 (en) | 2002-03-04 | 2003-09-04 | Alex Waibel | Portable object identification and translation system |
US7353184B2 (en) | 2002-03-07 | 2008-04-01 | Hewlett-Packard Development Company, L.P. | Customer-side market segmentation |
JP4278918B2 (ja) * | 2002-04-19 | 2009-06-17 | 富士通株式会社 | 画像データ処理装置とその方法 |
JP2003323440A (ja) | 2002-04-30 | 2003-11-14 | Japan Research Institute Ltd | 携帯端末を用いた撮影画像の情報提供システム、撮影画像の情報提供方法、およびその方法をコンピュータに実行させるプログラム |
JP2004005314A (ja) | 2002-06-03 | 2004-01-08 | Matsushita Electric Ind Co Ltd | データ検索システム及び、それに関する、装置または方法または記録媒体またはプログラム |
JP3562516B2 (ja) | 2002-06-27 | 2004-09-08 | 富士ゼロックス株式会社 | 画像印象評価装置、画像印象評価方法及び画像印象評価プログラム |
US7254548B1 (en) | 2002-07-10 | 2007-08-07 | Union Beach, L.P. | System and method for the administration of financial accounts using profiles |
JP4065507B2 (ja) | 2002-07-31 | 2008-03-26 | キヤノン株式会社 | 情報提示装置および情報処理方法 |
JP2004118384A (ja) * | 2002-09-25 | 2004-04-15 | Sharp Corp | 画像処理装置、ぼかし画像生成装置、ぼかし画像生成方法及び画像処理プログラムを記録した記録媒体 |
US7002551B2 (en) | 2002-09-25 | 2006-02-21 | Hrl Laboratories, Llc | Optical see-through augmented reality modified-scale display |
US6996251B2 (en) | 2002-09-30 | 2006-02-07 | Myport Technologies, Inc. | Forensic communication apparatus and method |
US7121469B2 (en) | 2002-11-26 | 2006-10-17 | International Business Machines Corporation | System and method for selective processing of digital images |
US6985240B2 (en) | 2002-12-23 | 2006-01-10 | International Business Machines Corporation | Method and apparatus for retrieving information about an object of interest to an observer |
US7127094B1 (en) | 2003-01-02 | 2006-10-24 | Electro Optical Sciences Inc | Method of controlling data gathered at remote locations |
US7283983B2 (en) | 2003-01-09 | 2007-10-16 | Evolution Robotics, Inc. | Computer and vision-based augmented interaction in the use of printed media |
US7016889B2 (en) | 2003-01-30 | 2006-03-21 | Hewlett-Packard Development Company, Lp. | System and method for identifying useful content in a knowledge repository |
US7764808B2 (en) | 2003-03-24 | 2010-07-27 | Siemens Corporation | System and method for vehicle detection and tracking |
US7103772B2 (en) | 2003-05-02 | 2006-09-05 | Giritech A/S | Pervasive, user-centric network security enabled by dynamic datagram switch and an on-demand authentication and encryption scheme through mobile intelligent data carriers |
US7072669B1 (en) | 2003-05-23 | 2006-07-04 | Verizon Corporate Services Group Inc. | Method for localizing the position of a wireless device |
US7410099B2 (en) | 2003-06-05 | 2008-08-12 | Ntt Docomo, Inc. | Apparatus and method for reading and decoding information contained in a barcode |
AU2004252838B2 (en) | 2003-06-06 | 2010-09-02 | Nm, Llc | Automatic access of internet content with a camera-enabled cell phone |
JP2005011180A (ja) | 2003-06-20 | 2005-01-13 | Nec Corp | Url検索システム及びそれに使用するサーバ並びにurl検索方法 |
US20050015370A1 (en) | 2003-07-14 | 2005-01-20 | Stavely Donald J. | Information management system and method |
JP4596754B2 (ja) * | 2003-07-29 | 2010-12-15 | 株式会社日立製作所 | 文字認識方法とそれを用いた携帯端末システム |
US7118032B2 (en) | 2003-08-15 | 2006-10-10 | Lockheed Martin Corporation | Portable transaction terminal having an image recognition system |
GB2407230A (en) | 2003-09-19 | 2005-04-20 | Openblue Ltd | Providing location based information to a mobile device |
US20050083413A1 (en) * | 2003-10-20 | 2005-04-21 | Logicalis | Method, system, apparatus, and machine-readable medium for use in connection with a server that uses images or audio for initiating remote function calls |
US20050102233A1 (en) | 2003-11-06 | 2005-05-12 | Sharp Laboratories Of America, Inc. | Associating mobile phone to vending machine via bar-code encoded data, CCD camera and internet connection |
US7310605B2 (en) | 2003-11-25 | 2007-12-18 | International Business Machines Corporation | Method and apparatus to transliterate text using a portable device |
FI115943B (fi) | 2003-12-12 | 2005-08-15 | Nokia Corp | Järjestely informaation esittämiseksi näytöllä |
US7872669B2 (en) | 2004-01-22 | 2011-01-18 | Massachusetts Institute Of Technology | Photo-based mobile deixis system and related techniques |
US7580061B2 (en) | 2004-01-26 | 2009-08-25 | Olympus Corporation | Image sensing apparatus which determines white balance correction information before photographing |
JP4413633B2 (ja) | 2004-01-29 | 2010-02-10 | 株式会社ゼータ・ブリッジ | 情報検索システム、情報検索方法、情報検索装置、情報検索プログラム、画像認識装置、画像認識方法および画像認識プログラム、ならびに、販売システム |
US7903838B2 (en) | 2004-01-30 | 2011-03-08 | Evolution Robotics, Inc. | Vision-enabled household appliances |
US7751805B2 (en) * | 2004-02-20 | 2010-07-06 | Google Inc. | Mobile image-based information retrieval system |
US8421872B2 (en) | 2004-02-20 | 2013-04-16 | Google Inc. | Image base inquiry system for search engines for mobile telephones with integrated camera |
US7774283B2 (en) | 2004-02-23 | 2010-08-10 | Pitney Bowes Inc. | Method and system for using a camera cell phone in transactions |
US20070230792A1 (en) | 2004-04-08 | 2007-10-04 | Mobileye Technologies Ltd. | Pedestrian Detection |
US7707218B2 (en) | 2004-04-16 | 2010-04-27 | Mobot, Inc. | Mobile query system and method based on visual cues |
US7296747B2 (en) | 2004-04-20 | 2007-11-20 | Michael Rohs | Visual code system for camera-equipped mobile devices and applications thereof |
US7769228B2 (en) | 2004-05-10 | 2010-08-03 | Siemens Corporation | Method for combining boosted classifiers for efficient multi-class object detection |
US20050252966A1 (en) | 2004-05-12 | 2005-11-17 | Kulas Chares J | Purchasing system using object matching |
US8121944B2 (en) | 2004-06-24 | 2012-02-21 | Jpmorgan Chase Bank, N.A. | Method and system for facilitating network transaction processing |
US7558595B2 (en) | 2004-06-25 | 2009-07-07 | Sony Ericsson Mobile Communications Ab | Mobile terminals, methods, and program products that generate communication information based on characters recognized in image data |
JP2008505402A (ja) | 2004-06-29 | 2008-02-21 | ウオーカー ディジタル、エルエルシー | 自動販売機の顧客のメンバーシップのための装置および方法 |
US20060008124A1 (en) | 2004-07-12 | 2006-01-12 | Ewe Hong T | Iris image-based recognition system |
US7309015B2 (en) | 2004-07-14 | 2007-12-18 | Scanbuy, Inc. | Mobile device gateway providing access to instant information |
US7631336B2 (en) | 2004-07-30 | 2009-12-08 | Broadband Itv, Inc. | Method for converting, navigating and displaying video content uploaded from the internet to a digital TV video-on-demand platform |
US7843488B2 (en) | 2004-08-09 | 2010-11-30 | Stapleton John J | Vision thermalization for sightless and visually impaired |
US8547401B2 (en) | 2004-08-19 | 2013-10-01 | Sony Computer Entertainment Inc. | Portable augmented reality device and method |
EP1640891B1 (de) | 2004-09-28 | 2013-02-13 | Swisscom AG | Verfahren zur Leitung eines Benutzers eines Mobilgerätes von einem aktuellen Standort aus bis zu einem Produkt |
US7376645B2 (en) | 2004-11-29 | 2008-05-20 | The Intellection Group, Inc. | Multimodal natural language query system and architecture for processing voice and proximity-based queries |
US7720436B2 (en) | 2006-01-09 | 2010-05-18 | Nokia Corporation | Displaying network objects in mobile devices based on geolocation |
US20060190812A1 (en) | 2005-02-22 | 2006-08-24 | Geovector Corporation | Imaging systems including hyperlink associations |
US20060223635A1 (en) | 2005-04-04 | 2006-10-05 | Outland Research | method and apparatus for an on-screen/off-screen first person gaming experience |
US7737965B2 (en) | 2005-06-09 | 2010-06-15 | Honeywell International Inc. | Handheld synthetic vision device |
US7353114B1 (en) | 2005-06-27 | 2008-04-01 | Google Inc. | Markup language for an interactive geographic information system |
US20080189185A1 (en) | 2005-08-10 | 2008-08-07 | Ebank Corporation | Account Opening Method |
WO2007027738A2 (en) | 2005-08-29 | 2007-03-08 | Evryx Technologies, Inc. | Interactivity via mobile image recognition |
US7548915B2 (en) | 2005-09-14 | 2009-06-16 | Jorey Ramer | Contextual mobile content placement on a mobile communication facility |
US7477909B2 (en) | 2005-10-31 | 2009-01-13 | Nuance Communications, Inc. | System and method for conducting a search using a wireless mobile device |
DE102005061952B4 (de) | 2005-12-23 | 2008-09-11 | Metaio Gmbh | Verfahren und System zur Bestimmung einer Ungenauigkeitsinformation in einem Augmented Reality System |
DE102006005044B4 (de) | 2006-02-03 | 2011-01-27 | Metaio Gmbh | Verfahren und System zur Bestimmung eines Datenmodells zur Überlagerung mit einem realen Objekt in einem Verfahren zur Objektverfolgung |
US7860317B2 (en) * | 2006-04-04 | 2010-12-28 | Microsoft Corporation | Generating search results based on duplicate image detection |
US7775437B2 (en) | 2006-06-01 | 2010-08-17 | Evryx Technologies, Inc. | Methods and devices for detecting linkable objects |
US7830417B2 (en) | 2006-08-15 | 2010-11-09 | Fuji Xerox Co., Ltd | System and method for interacting with objects via a camera enhanced mobile device |
US8838477B2 (en) | 2011-06-09 | 2014-09-16 | Golba Llc | Method and system for communicating location of a mobile device for hands-free payment |
US8187045B2 (en) | 2007-01-19 | 2012-05-29 | Thibodaux Ronald J | Air-propelled vessel with articulating member |
US7780522B2 (en) * | 2007-02-23 | 2010-08-24 | Cfph, Llc | Game at cash register |
US8756659B2 (en) | 2007-04-19 | 2014-06-17 | At&T Intellectual Property I, L.P. | Access authorization servers, methods and computer program products employing wireless terminal location |
US7756755B2 (en) | 2007-06-28 | 2010-07-13 | Hewlett-Packard Devlopment Company, L.P. | Capturing and utilizing consumer purchase intent information |
US8140525B2 (en) | 2007-07-12 | 2012-03-20 | Ricoh Company, Ltd. | Information processing apparatus, information processing method and computer readable information recording medium |
US8726194B2 (en) | 2007-07-27 | 2014-05-13 | Qualcomm Incorporated | Item selection using enhanced control |
US7845558B2 (en) | 2007-09-28 | 2010-12-07 | First Data Corporation | Accessing financial accounts with 3D bar code |
US8386918B2 (en) | 2007-12-06 | 2013-02-26 | International Business Machines Corporation | Rendering of real world objects and interactions into a virtual universe |
US8131118B1 (en) | 2008-01-31 | 2012-03-06 | Google Inc. | Inferring locations from an image |
US8903430B2 (en) | 2008-02-21 | 2014-12-02 | Microsoft Corporation | Location based object tracking |
US8320615B2 (en) | 2008-02-27 | 2012-11-27 | Honeywell International Inc. | Systems and methods for recognizing a target from a moving platform |
US7427980B1 (en) | 2008-03-31 | 2008-09-23 | International Business Machines Corporation | Game controller spatial detection |
US8219558B1 (en) | 2008-04-25 | 2012-07-10 | David Scott Trandal | Methods and systems for inventory management |
US9082117B2 (en) | 2008-05-17 | 2015-07-14 | David H. Chin | Gesture based authentication for wireless payment by a mobile electronic device |
US8542906B1 (en) | 2008-05-21 | 2013-09-24 | Sprint Communications Company L.P. | Augmented reality image offset and overlay |
US8099332B2 (en) | 2008-06-06 | 2012-01-17 | Apple Inc. | User interface for application management for a mobile device |
US8090359B2 (en) | 2008-09-08 | 2012-01-03 | Proctor Jr James Arthur | Exchanging identifiers between wireless communication to determine further information to be exchanged or further services to be provided |
US20100106720A1 (en) | 2008-10-24 | 2010-04-29 | National Kaohsiung University Of Applied Sciences | Method for identifying a remote pattern |
CN101414307A (zh) | 2008-11-26 | 2009-04-22 | 阿里巴巴集团控股有限公司 | 提供图片搜索的方法和服务器 |
US8497939B2 (en) | 2008-12-08 | 2013-07-30 | Home Box Office, Inc. | Method and process for text-based assistive program descriptions for television |
WO2010080121A1 (en) | 2008-12-18 | 2010-07-15 | The Regents Of The University Of California, Santa Cruz | Training-free generic object detection in 2-d and 3-d using locally adaptive regression kernels |
US8688517B2 (en) | 2009-02-13 | 2014-04-01 | Cfph, Llc | Method and apparatus for advertising on a mobile gaming device |
US8447066B2 (en) | 2009-03-12 | 2013-05-21 | Google Inc. | Performing actions based on capturing information from rendered documents, such as documents under copyright |
EP2406767A4 (en) * | 2009-03-12 | 2016-03-16 | Google Inc | AUTOMATIC CONTENT SUPPLY ASSOCIATED WITH CAPTURED INFORMATION, TYPE INFORMATION CAPTURED IN REAL TIME |
US8483715B2 (en) | 2009-03-26 | 2013-07-09 | Yahoo! Inc. | Computer based location identification using images |
US9024972B1 (en) | 2009-04-01 | 2015-05-05 | Microsoft Technology Licensing, Llc | Augmented reality computing with inertial sensors |
US9195898B2 (en) * | 2009-04-14 | 2015-11-24 | Qualcomm Incorporated | Systems and methods for image recognition using mobile devices |
US8190645B1 (en) * | 2009-06-04 | 2012-05-29 | Matthew Charles Bashaw | Method and system for storing, retrieving, and sharing data using a field-accessed database system comprising a mobile unit |
JP5347847B2 (ja) | 2009-08-31 | 2013-11-20 | 株式会社リコー | 画像撮影装置、通信確立方法、プログラム |
US8831279B2 (en) | 2011-03-04 | 2014-09-09 | Digimarc Corporation | Smartphone-based methods and systems |
US8219146B2 (en) | 2009-11-06 | 2012-07-10 | Sony Corporation | Audio-only user interface mobile phone pairing |
US8977639B2 (en) | 2009-12-02 | 2015-03-10 | Google Inc. | Actionable search results for visual queries |
US8189964B2 (en) | 2009-12-07 | 2012-05-29 | Google Inc. | Matching an approximately located query image against a reference image set |
US8751316B1 (en) | 2010-02-05 | 2014-06-10 | Intuit Inc. | Customer-controlled point-of-sale on a mobile device |
US20120072353A1 (en) | 2010-02-11 | 2012-03-22 | Christopher Boone | Enhanced system and method for multipath contactless transactions |
KR20150008840A (ko) | 2010-02-24 | 2015-01-23 | 아이피플렉 홀딩스 코포레이션 | 시각 장애인들을 지원하는 증강 현실 파노라마 |
WO2011126134A1 (ja) * | 2010-04-09 | 2011-10-13 | サイバーアイ・エンタテインメント株式会社 | リアルタイム動画像収集・認識・分類・処理・配信サーバシステム |
US8494274B2 (en) | 2010-06-18 | 2013-07-23 | Infosys Limited | System and method for performing a shopping activity through a wireless computing device |
US20120011142A1 (en) | 2010-07-08 | 2012-01-12 | Qualcomm Incorporated | Feedback to improve object recognition |
US20120011119A1 (en) | 2010-07-08 | 2012-01-12 | Qualcomm Incorporated | Object recognition system with database pruning and querying |
US8625902B2 (en) | 2010-07-30 | 2014-01-07 | Qualcomm Incorporated | Object recognition using incremental feature extraction |
US8523075B2 (en) * | 2010-09-30 | 2013-09-03 | Apple Inc. | Barcode recognition using data-driven classifier |
KR101788046B1 (ko) | 2010-11-03 | 2017-10-19 | 엘지전자 주식회사 | 이동 단말기 및 그 제어방법 |
US8550903B2 (en) | 2010-11-15 | 2013-10-08 | Bally Gaming, Inc. | System and method for bonus gaming using a mobile device |
US8626602B2 (en) | 2010-11-12 | 2014-01-07 | Marc George | Consumer shopping and purchase support system and marketplace |
US8831677B2 (en) | 2010-11-17 | 2014-09-09 | Antony-Euclid C. Villa-Real | Customer-controlled instant-response anti-fraud/anti-identity theft devices (with true-personal identity verification), method and systems for secured global applications in personal/business e-banking, e-commerce, e-medical/health insurance checker, e-education/research/invention, e-disaster advisor, e-immigration, e-airport/aircraft security, e-military/e-law enforcement, with or without NFC component and system, with cellular/satellite phone/internet/multi-media functions |
KR101350033B1 (ko) | 2010-12-13 | 2014-01-14 | 주식회사 팬택 | 증강 현실 제공 단말기 및 방법 |
KR101785601B1 (ko) | 2011-01-18 | 2017-10-16 | 에이치에스엔아이 엘엘씨 | 미디어 데이터에 있는 아이템을 인식하고 이와 관련된 정보를 전달하기 위한 시스템 및 방법 |
WO2012122293A1 (en) | 2011-03-07 | 2012-09-13 | Fourth Wall Studios, Inc. | Augmented reality mission generators |
US9036925B2 (en) | 2011-04-14 | 2015-05-19 | Qualcomm Incorporated | Robust feature matching for visual search |
WO2012150602A1 (en) * | 2011-05-03 | 2012-11-08 | Yogesh Chunilal Rathod | A system and method for dynamically monitoring, recording, processing, attaching dynamic, contextual & accessible active links & presenting of physical or digital activities, actions, locations, logs, life stream, behavior & status |
US8442500B2 (en) | 2011-06-21 | 2013-05-14 | Qualcomm Incorporated | Relevant content delivery |
US20130013414A1 (en) | 2011-07-05 | 2013-01-10 | Haff Maurice | Apparatus and method for direct discovery of digital content from observed physical media |
US20130046602A1 (en) | 2011-08-17 | 2013-02-21 | Bank Of America Corporation | Method of providing an offer based on proximity to a point of sale transaction |
US8577810B1 (en) | 2011-09-29 | 2013-11-05 | Intuit Inc. | Secure mobile payment authorization |
ES2687748T3 (es) | 2012-02-24 | 2018-10-29 | Nant Holdings Ip Llc | Activación de contenido por medio de autenticación basada en interacciones, sistemas y método |
US9407860B2 (en) * | 2012-04-06 | 2016-08-02 | Melvin Lee Barnes, JR. | System, method and computer program product for processing image data |
US20130304609A1 (en) | 2012-05-10 | 2013-11-14 | Wal-Mart Stores, Inc. | Interactive Shopping List System |
US20140006165A1 (en) | 2012-06-28 | 2014-01-02 | Bank Of America Corporation | Systems and methods for presenting offers during an in-store shopping experience |
US10846766B2 (en) | 2012-06-29 | 2020-11-24 | Ebay Inc. | Contextual menus based on image recognition |
GB2506881A (en) | 2012-10-10 | 2014-04-16 | Barclays Bank Plc | System and method for enrolment of payment transaction services |
US20150339324A1 (en) | 2014-05-20 | 2015-11-26 | Road Warriors International, Inc. | System and Method for Imagery Warehousing and Collaborative Search Processing |
US10043238B2 (en) | 2016-01-21 | 2018-08-07 | International Business Machines Corporation | Augmented reality overlays based on an optically zoomed input |
-
2006
- 2006-01-26 US US11/342,094 patent/US7565008B2/en not_active Expired - Lifetime
- 2006-08-22 JP JP2006225644A patent/JP2007200275A/ja not_active Withdrawn
- 2006-08-29 EP EP06018047A patent/EP1814060A3/en not_active Ceased
-
2007
- 2007-01-23 WO PCT/US2007/002010 patent/WO2007089533A2/en active Application Filing
-
2009
- 2009-07-20 US US12/505,714 patent/US7881529B2/en not_active Expired - Fee Related
-
2011
- 2011-01-13 US US13/005,716 patent/US8224077B2/en not_active Expired - Lifetime
-
2012
- 2012-05-04 US US13/464,410 patent/US8494264B2/en not_active Expired - Lifetime
- 2012-05-10 JP JP2012108209A patent/JP2012194984A/ja not_active Withdrawn
- 2012-10-02 US US13/633,533 patent/US8582817B2/en not_active Expired - Lifetime
-
2013
- 2013-08-16 US US13/968,666 patent/US8824738B2/en not_active Expired - Fee Related
-
2014
- 2014-04-11 US US14/251,480 patent/US9288271B2/en not_active Expired - Fee Related
- 2014-08-08 JP JP2014162208A patent/JP2015007992A/ja active Pending
-
2015
- 2015-02-05 US US14/615,162 patent/US9578107B2/en not_active Expired - Lifetime
-
2016
- 2016-12-28 US US15/392,935 patent/US9824099B2/en not_active Expired - Lifetime
-
2017
- 2017-11-20 US US15/818,312 patent/US10095712B2/en not_active Expired - Fee Related
-
2018
- 2018-10-08 US US16/154,547 patent/US10509821B2/en not_active Expired - Fee Related
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10289243A (ja) * | 1997-04-14 | 1998-10-27 | Casio Comput Co Ltd | データ検索システム |
JP2001101191A (ja) * | 1999-09-27 | 2001-04-13 | Cadix Inc | 画像識別装置及び画像識別に用いられるデータベースシステム |
JP2001282825A (ja) * | 2000-03-29 | 2001-10-12 | Eighting:Kk | 情報検索方法、情報検索サーバーおよび携帯端末 |
JP2005509219A (ja) * | 2001-11-05 | 2005-04-07 | ウェイン・シー・ボンチック | 画像取込及び識別のためのシステム及び方法 |
JP2003178067A (ja) * | 2001-12-10 | 2003-06-27 | Mitsubishi Electric Corp | 携帯端末型画像処理システム、携帯端末およびサーバ |
JP2003271650A (ja) * | 2002-03-12 | 2003-09-26 | Nec Corp | 携帯電話Webサイト画像検索システム及び方法並びにサーバーとそのプログラム |
JP2004265452A (ja) * | 2004-06-25 | 2004-09-24 | Mitsubishi Electric Corp | 文字認識装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2012194984A (ja) | 2012-10-11 |
US8582817B2 (en) | 2013-11-12 |
US8824738B2 (en) | 2014-09-02 |
US20130336530A1 (en) | 2013-12-19 |
US20110268317A1 (en) | 2011-11-03 |
US20140223022A1 (en) | 2014-08-07 |
US20160012077A1 (en) | 2016-01-14 |
WO2007089533A3 (en) | 2008-01-10 |
US8224077B2 (en) | 2012-07-17 |
US8494264B2 (en) | 2013-07-23 |
US9824099B2 (en) | 2017-11-21 |
US20190042599A1 (en) | 2019-02-07 |
US9578107B2 (en) | 2017-02-21 |
US20130034267A1 (en) | 2013-02-07 |
US10509821B2 (en) | 2019-12-17 |
US20180081907A1 (en) | 2018-03-22 |
US20170124119A1 (en) | 2017-05-04 |
WO2007089533A2 (en) | 2007-08-09 |
EP1814060A2 (en) | 2007-08-01 |
EP1814060A3 (en) | 2008-12-10 |
US9288271B2 (en) | 2016-03-15 |
US7565008B2 (en) | 2009-07-21 |
US7881529B2 (en) | 2011-02-01 |
JP2007200275A (ja) | 2007-08-09 |
US20060181605A1 (en) | 2006-08-17 |
US20100011058A1 (en) | 2010-01-14 |
US20120219187A1 (en) | 2012-08-30 |
US10095712B2 (en) | 2018-10-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10509821B2 (en) | Data capture and identification system and process | |
US7016532B2 (en) | Image capture and identification system and process | |
US10500097B2 (en) | Image capture and identification system and process | |
US10617568B2 (en) | Image capture and identification system and process |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150717 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150728 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20151026 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20160322 |