JP2018522312A - 画像のサーチのための方法およびデバイス - Google Patents
画像のサーチのための方法およびデバイス Download PDFInfo
- Publication number
- JP2018522312A JP2018522312A JP2017556824A JP2017556824A JP2018522312A JP 2018522312 A JP2018522312 A JP 2018522312A JP 2017556824 A JP2017556824 A JP 2017556824A JP 2017556824 A JP2017556824 A JP 2017556824A JP 2018522312 A JP2018522312 A JP 2018522312A
- Authority
- JP
- Japan
- Prior art keywords
- image
- fingerprint
- search
- compressed
- sensor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 56
- 238000007906 compression Methods 0.000 claims abstract description 38
- 230000006835 compression Effects 0.000 claims abstract description 38
- 239000011159 matrix material Substances 0.000 claims description 44
- 238000004891 communication Methods 0.000 claims description 12
- 230000036961 partial effect Effects 0.000 claims description 6
- 238000005516 engineering process Methods 0.000 claims description 5
- 238000004364 calculation method Methods 0.000 claims description 4
- 238000004590 computer program Methods 0.000 claims 1
- 238000012545 processing Methods 0.000 description 23
- 230000008569 process Effects 0.000 description 7
- 239000013598 vector Substances 0.000 description 6
- 230000002829 reductive effect Effects 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000009472 formulation Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 230000000670 limiting effect Effects 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000003860 storage Methods 0.000 description 2
- 230000001131 transforming effect Effects 0.000 description 2
- 206010011878 Deafness Diseases 0.000 description 1
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 1
- 230000001174 ascending effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 125000004122 cyclic group Chemical group 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 231100000895 deafness Toxicity 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000000945 filler Substances 0.000 description 1
- 238000007667 floating Methods 0.000 description 1
- 208000016354 hearing loss disease Diseases 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000012535 impurity Substances 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 229940050561 matrix product Drugs 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000001681 protective effect Effects 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000010845 search algorithm Methods 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
- G06F16/5838—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/51—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/213—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods
- G06F18/2137—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods based on criteria of topology preservation, e.g. multidimensional scaling or self-organising maps
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/213—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods
- G06F18/2137—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods based on criteria of topology preservation, e.g. multidimensional scaling or self-organising maps
- G06F18/21375—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods based on criteria of topology preservation, e.g. multidimensional scaling or self-organising maps involving differential geometry, e.g. embedding of pattern manifold
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
- G06V10/751—Comparing pixel values or logical combinations thereof, or feature values having positional relevance, e.g. template matching
- G06V10/7515—Shifting the patterns to accommodate for positional errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
- G06V10/7715—Feature extraction, e.g. by transforming the feature space, e.g. multi-dimensional scaling [MDS]; Mappings, e.g. subspace methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/80—Recognising image objects characterised by unique random patterns
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2218/00—Aspects of pattern recognition specially adapted for signal processing
- G06F2218/22—Source localisation; Inverse modelling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/90—Identifying an image sensor based on its output data
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Library & Information Science (AREA)
- Multimedia (AREA)
- Software Systems (AREA)
- Evolutionary Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Computing Systems (AREA)
- Medical Informatics (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Collating Specific Patterns (AREA)
- Image Input (AREA)
Abstract
Description
−センサと同一のピクセルサイズを有する。
−例えば、各光センサがただ1つのPRNUを有するなど、特定のセンサを一義的に識別する。
−(その乗法的な性質に起因して)完全に暗い画像を除き、特定のセンサにより取得されたあらゆる画像に存在する。
−種々の環境条件(例えば、異なる温度/湿気、種々のカメラバッテリの充電レベルなど)において、安定的である。
−様々な信号処理演算に対してロバストである。
−好適な命令の実行を介して、好ましくはプログラマブルな方式でデバイス1の動作を管理する、例えば1または複数のCPUである、制御処理手段11。
−制御処理手段11との信号通信における、例えばランダムアクセスメモリRAMである、揮発性メモリ手段12であって、デバイス1が動作状態にあるとき、揮発性メモリ手段12は、少なくとも、制御処理手段11により読み取られ得る命令を格納する、揮発性メモリ手段12。
−制御処理手段11との、および揮発性メモリ手段12との信号通信における好ましくは、1または複数の磁気ディスク(ハードディスク)またはフラッシュメモリまたは同様のものである大容量メモリ手段13であって、メモリ手段13は、少なくとも、1または複数の画像および/または画像への参照(例えばポインタ、URLユニバーサルアドレスまたは同様のもの)を格納し、各画像および/またはそれへの参照について、画像および/または参照と関連付けられ、かつ画像を取得したセンサに関連する少なくとも1つのセンサフィンガープリントを格納する、大容量メモリ手段13。
−IEEE803.2(Ethernet(登録商標)としても既知)または802.11(WiFi(登録商標)としても既知)または802.16(WiMAX(登録商標)としても既知)ファミリの規格により動作する、好ましくはネットワークインタフェース、または、デバイス1がデータネットワークを介して他のデバイスと通信することを可能にする、GSM(登録商標)/GPRS/UMTS/LTEまたはTETRAデータネットワークのインタフェースであり、後者のデバイスは、さらに以下で説明されている、通信手段14。
−例えば、デバイス1を周辺機器(例えば、他の大容量メモリ手段へのアクセスを可能にする1または複数のインタフェース。これにより、好ましくは後者から大容量メモリ手段13へ情報をコピーすることを可能にする)へ、または(制御処理手段11が実行する必要があるであろう)命令をメモリ手段12へと書き込むために構成されるプログラミング端末へ、接続するために用いられてよい入力/出力(I/O)手段15であって、そのような入力/出力手段15は、例えば、USB、ファイヤワイヤ、RS232、IEEE1284アダプタまたは同様のものを備えてよい、入力/出力手段15。
−制御処理手段11、揮発性メモリ手段12、大容量メモリ手段13、通信手段14、および入力/出力手段15の間で情報が交換されることを可能にする通信バス17。
−画像アーカイブ(例えばFlickr(登録商標)、Instagram(登録商標)、Facebook(登録商標)または同様のもの)、ウェブサイトのセットまたは同様のものを検索し、そこに含まれる画像を見つけること。
−デバイス1にアクセス可能なメモリ手段にまだ存在しない場合、見つけられた各画像に関してセンサフィンガープリントを生成し、以下でより詳細に説明されるであろうように、場合によっては、生成されたセンサフィンガープリントを圧縮すること。
−見つけられた画像およびそれらと関連付けられた圧縮されたセンサフィンガープリントをデバイス1にアクセス可能なメモリ手段へと好ましくは、インクリメンタル/デファレンシャル方式で(すなわち、メモリ手段にまだ存在しない画像またはそれらへの参照だけ)格納すること。
−サーチセンサフィンガープリントが読み取られる、フィンガープリント読み取り段階P1であって、通信手段14を介して、デバイス2により受信された要求メッセージに好ましくは含まれるクエリに好ましくは備えられ、要求メッセージは、端末2のユーザとのインターアクションに続いて、または端末2による命令のシーケンスの自律的な実行に際し、端末2により好ましくは生成される、フィンガープリント読み取り段階P1。
−以下でさらに説明されるであろうランダムプロジェクション技術を用いて、前の段階P1中に読み取られたフィンガープリントが、デバイス1の制御処理手段11により圧縮される、フィンガープリント圧縮段階P2。
−段階P2において圧縮されたフィンガープリントが、制御処理手段11を介して、デバイス1にアクセス可能なメモリ手段12、13に格納される圧縮されたフィンガープリントのうち少なくとも1つと比較され、画像(またはそれらへの参照)が、圧縮されたサーチセンサフィンガープリントと、画像(またはそれらへの参照)と関連付けられた圧縮されたセンサフィンガープリントのうちの1つとの間で計算された相関インデックスに基づいて、選択されるかまたは破棄されるかのいずれかであり、例えば、サーチセンサフィンガープリントの少なくとも1つの部分と、評価されている画像と関連付けられたフィンガープリントの少なくとも1つの部分との比較が、閾値を超すと、画像は、選択されてよく、そうでなければ、破棄されてよい、サーチ段階P3。
−段階P3中にデバイス1により選択されたあらゆる画像(またはそれらへの参照)は、1または複数の応答メッセージへと好ましくは組み込まれ、要求メッセージ(例えば端末2またはデバイス1で動作している処理または同様のもの)の送信者に送信される、結果出力段階P4。
−外れ値の位置を昇順でソートする。
−できる限り最少の数のビットを用いて、第1の位置を符号化する。
−異なる方式で(例えば差分符号化を用いて)、すなわち、第2の位置と第1の位置との間の差異、第3の位置と第2の位置との間の差異などを計算することにより、第1の位置の後の位置を符号化する。
−k次指数ゴロム符号を用いて、位置の差異を符号化する。
−(デバイス3から抽出された、または要求メッセージに含まれていた)フィンガープリントが読み取られ、各々が種々の解像度を有する所与の数のバージョンが生成される。
−フィンガープリントの各バージョンは、本発明の他の実施形態に関連して前に説明されたように、ランダムプロジェクション技術を用いて圧縮される。
−圧縮されたフィンガープリントの各バージョンは、ベクトルへと(前に説明されたように)変換され、全てのベクトルは、一緒に連結され、それにより、圧縮されたフィンガープリントの種々のバージョンの全てを(種々の解像度全てで)含む単一のベクトルを(元のフィンガープリントの各々について)生成する。
Claims (35)
- メモリ手段における画像のサーチのための方法であって、
前記メモリ手段は、
−1または複数の画像および前記画像への参照のうち少なくとも1つと、
−各画像およびそれへの参照のうち少なくとも1つに対して、前記画像および前記参照のうち少なくとも1つと関連付けられた、かつ前記画像を取得したセンサに関連する、少なくとも1つのセンサフィンガープリントとを少なくとも含み、
前記方法は、
−読み取り手段を介してサーチセンサフィンガープリントが読み取られる、読み取り段階と、
−コンピューティング手段を介して前記メモリ手段に含まれる、前記画像および画像の参照の各々のうち少なくとも1つが、前記画像のうち1つの前記センサフィンガープリントの少なくとも1つの部分と、前記サーチセンサフィンガープリントの少なくとも1つの部分との間の少なくとも1つの比較に基づいて、選択されるかまたは破棄されるかである、サーチ段階とを備え、
前記方法は、さらに、
前記サーチ段階の前に実行されるべき圧縮段階を備え、前記サーチセンサフィンガープリント、および、前記画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記センサフィンガープリントのうち少なくとも1つが、ランダムプロジェクション技術を用いて、前記コンピューティング手段を介して圧縮される、方法。 - 前記サーチセンサフィンガープリント、および、前記画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記センサフィンガープリントの各々は、少なくとも1つの圧縮行列を前記サーチセンサフィンガープリントおよび前記センサフィンガープリントの各々で乗算することにより圧縮され、逆もまた同様である、請求項1に記載の方法。
- 前記少なくとも1つの圧縮行列は、部分巡回行列である、請求項2に記載の方法。
- 前記少なくとも1つの圧縮行列と、前記画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記センサフィンガープリントのうち少なくとも1つとの間の前記乗算は、高速フーリエ変換を用いて実行される、請求項3に記載の方法。
- 前記少なくとも1つの圧縮行列は、圧縮行列のセットから、圧縮されるべき前記サーチセンサフィンガープリントまたは前記センサフィンガープリントのサイズに基づいて選択される、請求項2から4の何れか一項に記載の方法。
- 2つまたはそれより多い圧縮行列が、圧縮行列の前記セットから、圧縮されるべき前記サーチセンサフィンガープリントまたは前記センサフィンガープリントのサイズに基づいて選択され、前記選択された圧縮行列の次元は、前記圧縮行列と圧縮されるべき前記サーチセンサフィンガープリントまたは前記センサフィンガープリントとの間の積が、予め定義されたサイズを有する圧縮されたセンサフィンガープリントを生成するものである、請求項5に記載の方法。
- 各センサフィンガープリントは、異なる解像度を有する前記センサフィンガープリントの複数のバージョンを連結することにより、前記コンピューティング手段を介して圧縮され、前記センサフィンガープリントの各バージョンは、ランダムプロジェクション技術を用いて圧縮される、請求項1から4の何れか一項に記載の方法。
- 前記サーチ段階中、相関インデックスが、前記圧縮されたサーチセンサフィンガープリントと、前記画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記圧縮されたフィンガープリントの各々との間で前記コンピューティング手段を介して計算され、前記画像または前記画像への前記参照は、前記相関インデックスの値に基づいて選択されるかまたは破棄されるかである、請求項1から7の何れか一項に記載の方法。
- 前記相関インデックスは、前記圧縮されたサーチセンサフィンガープリントと前記画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記圧縮されたフィンガープリントの各々との間でハミング距離に基づいて計算される、請求項8に記載の方法。
- 前記サーチ段階中、2つまたはそれより多いサーチ反復が前記コンピューティング手段を介して実行され、最後の反復に先行する前記反復のうち少なくとも1つの前記反復中、相関インデックスが、前記圧縮されたサーチフィンガープリントの少なくとも1つの部分と、前記画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記圧縮されたフィンガープリントの各々の少なくとも1つの部分との間で計算され、前記画像のセットまたは前記画像への参照が、前記相関インデックスに基づいて選択され、最後の反復中、前記サーチフィンガープリントと、画像および前記画像のセットに含まれる前記画像への前記参照のうち少なくとも1つと関連付けられた前記フィンガープリントの各々との間で比較が行われる、請求項8または9に記載の方法。
- 最後の反復に先行する前記反復のうち少なくとも1つの前記反復中、前記圧縮されたサーチセンサフィンガープリントと比較される、前記画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記圧縮されたフィンガープリントの各々の前記部分が、前記圧縮されたサーチセンサフィンガープリントの特徴点の位置に基づいて判定され、前記特徴点は、特定の閾値より大きい値、または前記フィンガープリントの点の平均値より大きい値を有する、圧縮されたフィンガープリントの点である、請求項10に記載の方法。
- 前記サーチ段階の前に実行される、メモリをロードする段階も備え、前記画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記センサフィンガープリントの前記特徴点の位置を含むサーチ情報は、揮発性メモリ手段へとロードされる、請求項11に記載の方法。
- 前記サーチ情報に含まれる位置は、画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記圧縮されたフィンガープリントの解像度より低い前記解像度で符号化される、請求項12に記載の方法。
- 前記サーチ情報に含まれる位置は、k次指数ゴロム符号を用いることにより、異なる方式で符号化される、請求項12または13に記載の方法。
- 前記サーチ段階は、複数のサーチのサブ段階を備え、前記サブ段階の各々は、前記コンピューティング手段を介して、他のものに依存せずに実行でき、前記サブ段階の各々は、前記メモリ手段に含まれる前記画像のサブセットに実行される、請求項1から14の何れか一項に記載の方法。
- サーチのサブ段階が実行される、前記メモリ手段に含まれる前記画像の各サブセットは、他のサブセットから切り離される、請求項15に記載の方法。
- 前記圧縮段階中、前記圧縮されたフィンガープリントの点の各々の値は、前記コンピューティング手段を介して、限定された値のセットの範囲内に含まれる値へと変換される、請求項1から16のいずれか一項に記載の方法。
- 請求項1から17の何れか一項に記載の画像サーチ方法をコンピュータに実行させるためのコンピュータプログラム。
- 画像のサーチのためのデバイスであって、
−大容量メモリ手段にアクセスするために適合される入力/出力手段であって、
前記大容量メモリ手段は、
1または複数の画像および前記画像への参照のうち少なくとも1つと、
各画像およびそれへの参照のうち少なくとも1つについて、前記画像および前記参照のうち少なくとも1つと関連付けられた、および前記画像を取得したセンサに関連した少なくとも1つのセンサフィンガープリントとを少なくとも含む、入力/出力手段と、
−サーチセンサフィンガープリントを読み取るための読み取り手段と、
−前記センサフィンガープリントの少なくとも一部がロードできる揮発性メモリ手段と、
−前記大容量メモリ手段、前記揮発性メモリ手段、および前記読み取り手段との信号通信におけるコンピューティング手段であって、前記コンピューティング手段は、前記画像および前記画像への前記参照のうち少なくとも1つの間でサーチを実行し、前記大容量メモリ手段および前記揮発性メモリ手段に含まれる前記画像および前記画像への前記参照の各々のうち少なくとも1つは、前記画像の前記センサフィンガープリントの少なくとも1つの部分と、前記サーチセンサフィンガープリントの少なくとも1つの部分との間の少なくとも1つの比較に基づいて選択されるかまたは破棄されるかである、コンピューティング手段とを備え、
前記コンピューティング手段は、さらに前記サーチを行う前に、前記サーチセンサフィンガープリントと、前記画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記センサフィンガープリントのうち少なくとも1つとをランダムプロジェクション技術を用いて圧縮するデバイス。 - 前記サーチセンサフィンガープリント、および、前記画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記センサフィンガープリントの各々は、少なくとも1つの圧縮行列を前記サーチセンサフィンガープリントおよび前記センサフィンガープリントの各々で乗算することにより圧縮され、逆もまた同様である、請求項19に記載のデバイス。
- 前記少なくとも1つの圧縮行列は、部分巡回行列である、請求項20に記載のデバイス。
- 前記コンピューティング手段は、さらに、前記少なくとも1つの圧縮行列を、前記画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記センサフィンガープリントのうち少なくとも1つで乗算すべく、高速フーリエ変換を実行する請求項21に記載のデバイス。
- 前記コンピューティング手段は、さらに、圧縮されるべき前記サーチセンサフィンガープリントまたは前記センサフィンガープリントのサイズに基づいて、圧縮行列のセットから前記少なくとも1つの圧縮行列を選択する請求項19から22の何れか一項に記載のデバイス。
- 前記コンピューティング手段は、圧縮行列の前記セットから、2つまたはそれより多い圧縮行列を圧縮されるべき前記サーチセンサフィンガープリントまたは前記センサフィンガープリントのサイズに基づいて選択され、前記選択された圧縮行列の次元は、前記圧縮行列と圧縮されるべき前記サーチセンサフィンガープリントまたは前記センサフィンガープリントとの間の積が、予め定義されたサイズを有する圧縮されたセンサフィンガープリントを生成するものである、請求項23に記載のデバイス。
- 前記コンピューティング手段は、さらに、異なる解像度を有する前記センサフィンガープリントの複数のバージョンを連結することにより、各センサフィンガープリントを圧縮し、前記センサフィンガープリントの各バージョンは、ランダムプロジェクション技術を用いることにより、前記コンピューティング手段によって圧縮される、請求項19から22の何れか一項に記載のデバイス。
- 前記コンピューティング手段は、さらに、前記サーチ中、前記圧縮されたサーチセンサフィンガープリントと、前記画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記圧縮されたフィンガープリントの各々との間の相関インデックスを計算し、前記コンピューティング手段は、前記画像および前記画像への参照のうち少なくとも1つを前記相関インデックスの値に基づいて、選択または破棄する、請求項19から25の何れか一項に記載のデバイス。
- 前記コンピューティング手段は、前記圧縮されたサーチセンサフィンガープリントと、前記画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記圧縮されたフィンガープリントの各々との間でハミング距離に基づいて前記相関インデックスを計算する、請求項26に記載のデバイス。
- 前記コンピューティング手段は、さらに、前記サーチ中、2つまたはそれより多いサーチ反復を実行し、最後の反復に先行する前記反復のうち少なくとも1つの前記反復中、前記コンピューティング手段は、前記圧縮されたサーチフィンガープリントの少なくとも1つの部分と、前記画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記圧縮されたフィンガープリントの各々の1つの部分との間の相関インデックスを計算し、画像のセットまたは前記画像への参照を前記相関インデックスに基づいて選択し、最後の反復中、前記コンピューティング手段は、前記サーチフィンガープリントと、前記画像のセットに含まれる、前記画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記フィンガープリントの各々との間で比較が行われる、請求項26または27に記載のデバイス。
- 前記コンピューティング手段は、さらに、最後の反復に先行する前記反復のうち少なくとも1つの前記反復中、前記圧縮されたサーチセンサフィンガープリントと比較される、前記画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記圧縮されたフィンガープリントの各々の前記部分を、前記圧縮されたサーチセンサフィンガープリントの特徴点の位置に基づいて判定し、前記特徴点は、特定の閾値より大きい値、または前記フィンガープリントの点の平均値より大きい値を有する圧縮されたフィンガープリントの点である、請求項28に記載のデバイス。
- コンピューティング手段は、さらに、前記画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記センサフィンガープリントの前記特徴点の位置を含むサーチ情報を、前記サーチの前に、前記揮発性メモリ手段へとロードする、請求項29に記載のデバイス。
- 前記コンピューティング手段は、さらに、前記サーチ情報に含まれる位置を、前記画像および前記画像への前記参照のうち少なくとも1つと関連付けられた前記圧縮されたフィンガープリントの解像度より低い前記解像度で符号化する、請求項30に記載のデバイス。
- 前記コンピューティング手段は、さらに、前記サーチ情報に含まれる位置をk次指数ゴロム符号を用いることにより、異なる方式で、符号化する、請求項30または31に記載のデバイス。
- 前記コンピューティング手段は、さらに、前記圧縮されたフィンガープリントの点の各々の値を限定された値のセットの範囲内に含まれる値へと変換する、請求項19から32の何れか一項に記載のデバイス。
- 前記デバイスの各々は、サーチ部分を実行し、各部分は、他のものに依存せずに実行でき、前記サーチ部分の各々は、前記大容量メモリ手段に含まれる前記画像のサブセットに実行される、請求項19から33の何れか一項に記載の複数のデバイスを備えるコンピューティングシステム。
- サーチ部分が実行される、前記大容量メモリ手段に含まれる前記画像の各サブセットは、他のサブセットから切り離される、請求項34に記載のコンピューティングシステム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
IT102015000026649 | 2015-06-23 | ||
ITUB20151608 | 2015-06-23 | ||
PCT/IB2016/053656 WO2016207774A1 (en) | 2015-06-23 | 2016-06-20 | Method and device for searching images |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018522312A true JP2018522312A (ja) | 2018-08-09 |
JP6891379B2 JP6891379B2 (ja) | 2021-06-18 |
Family
ID=54064511
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017556824A Active JP6891379B2 (ja) | 2015-06-23 | 2016-06-20 | 画像のサーチのための方法およびデバイス |
Country Status (8)
Country | Link |
---|---|
US (1) | US10515112B2 (ja) |
EP (1) | EP3314534B1 (ja) |
JP (1) | JP6891379B2 (ja) |
CN (1) | CN107735783B (ja) |
ES (1) | ES2898868T3 (ja) |
IL (1) | IL256105B (ja) |
PL (1) | PL3314534T3 (ja) |
WO (1) | WO2016207774A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019536127A (ja) * | 2016-10-19 | 2019-12-12 | ポリテクニコ ディ トリノ | ユーザ機器を認証する装置及び方法 |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB201515615D0 (en) * | 2015-09-03 | 2015-10-21 | Functional Technologies Ltd | Clustering images based on camera fingerprints |
CN106656210B (zh) * | 2017-01-03 | 2020-06-19 | 重庆邮电大学 | 一种基于完备循环差集的可快速编码的type-II QC-LDPC码构造方法 |
US11405358B2 (en) * | 2017-03-01 | 2022-08-02 | Siemens Aktiengesellschaft | Network security monitoring of network traffic |
CN107760633A (zh) * | 2017-11-30 | 2018-03-06 | 成都欧林生物科技股份有限公司 | 肺炎链球菌的固体培养基 |
US11146445B2 (en) * | 2019-12-02 | 2021-10-12 | Alibaba Group Holding Limited | Time series decomposition |
CN114422757B (zh) * | 2020-04-14 | 2023-06-02 | 华为技术有限公司 | 一种摄像机的认证方法及控制装置 |
CN111522973B (zh) * | 2020-04-16 | 2023-03-31 | 重庆邮电大学 | 一种融合压缩感知的隐私保护图像检索方法 |
WO2022099696A1 (zh) * | 2020-11-16 | 2022-05-19 | 华为技术有限公司 | 一种摄像头标识方法、认证方法、系统及终端 |
CN115880734A (zh) * | 2022-05-10 | 2023-03-31 | 神盾股份有限公司 | 生物特征检测传感器及其信号处理方法及电子产品 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1091634A (ja) * | 1996-08-15 | 1998-04-10 | Hewlett Packard Co <Hp> | 写真画像検索システム |
JP2004258963A (ja) * | 2003-02-26 | 2004-09-16 | Fujitsu Ltd | 多段階照合による高速idレス照合方法およびシステム |
JP2004265038A (ja) * | 2003-02-28 | 2004-09-24 | Nec Corp | 指紋照合装置及びその方法 |
JP2005215883A (ja) * | 2004-01-28 | 2005-08-11 | Sony Corp | 画像照合装置、プログラム、および画像照合方法 |
WO2007094856A2 (en) * | 2005-12-16 | 2007-08-23 | The Research Foundation Of State University Of New York | Method and apparatus for identifying an imaging device |
JP2011077958A (ja) * | 2009-09-30 | 2011-04-14 | Chiba Univ | 次元圧縮装置、次元圧縮方法及び次元圧縮プログラム |
US20120195476A1 (en) * | 2011-01-27 | 2012-08-02 | Sevine Bayram | Sensor fingerprint matching in large image and video databases |
WO2014021785A1 (en) * | 2012-08-02 | 2014-02-06 | Agency For Science, Technology And Research | Testing apparatuses, servers and methods for controlling a testing apparatus |
JP2014524693A (ja) * | 2011-08-10 | 2014-09-22 | クアルコム,インコーポレイテッド | 特徴点位置情報の符号化 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7092017B2 (en) * | 2002-09-13 | 2006-08-15 | Eastman Kodak Company | Fixed pattern noise removal in CMOS imagers across various operational conditions |
US7251372B2 (en) * | 2004-01-14 | 2007-07-31 | Nec Solutions (America) Inc. | Method and system for compressing digitized fingerprint images by a uniform degree of compression |
WO2006044917A2 (en) * | 2004-10-15 | 2006-04-27 | The Regents Of The University Of Colorado, A Body Corporate | Revocable biometrics with robust distance metrics |
US7787030B2 (en) * | 2005-12-16 | 2010-08-31 | The Research Foundation Of State University Of New York | Method and apparatus for identifying an imaging device |
US8385971B2 (en) * | 2008-08-19 | 2013-02-26 | Digimarc Corporation | Methods and systems for content processing |
US8731236B2 (en) * | 2011-01-14 | 2014-05-20 | Futurewei Technologies, Inc. | System and method for content protection in a content delivery network |
CN102508144A (zh) * | 2011-10-26 | 2012-06-20 | 西安电子科技大学 | 测量ccd芯片暗信号非均匀性和光子响应非均匀性的方法 |
GB2486987B (en) * | 2012-01-03 | 2013-09-04 | Forensic Pathways Ltd | Methods for automatically clustering images acquired by unknown devices |
CN103020641A (zh) * | 2012-11-18 | 2013-04-03 | 郑州大学 | 一种基于dft交叉相关分析的数码照片来源识别方法 |
EP3172700B1 (en) * | 2014-07-21 | 2021-04-28 | Politecnico Di Torino | Improved method for fingerprint matching and camera identification, device and system |
-
2016
- 2016-06-20 ES ES16745824T patent/ES2898868T3/es active Active
- 2016-06-20 CN CN201680034681.0A patent/CN107735783B/zh active Active
- 2016-06-20 WO PCT/IB2016/053656 patent/WO2016207774A1/en active Application Filing
- 2016-06-20 PL PL16745824T patent/PL3314534T3/pl unknown
- 2016-06-20 JP JP2017556824A patent/JP6891379B2/ja active Active
- 2016-06-20 EP EP16745824.9A patent/EP3314534B1/en active Active
- 2016-06-20 US US15/575,234 patent/US10515112B2/en active Active
-
2017
- 2017-12-04 IL IL256105A patent/IL256105B/en unknown
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1091634A (ja) * | 1996-08-15 | 1998-04-10 | Hewlett Packard Co <Hp> | 写真画像検索システム |
JP2004258963A (ja) * | 2003-02-26 | 2004-09-16 | Fujitsu Ltd | 多段階照合による高速idレス照合方法およびシステム |
JP2004265038A (ja) * | 2003-02-28 | 2004-09-24 | Nec Corp | 指紋照合装置及びその方法 |
JP2005215883A (ja) * | 2004-01-28 | 2005-08-11 | Sony Corp | 画像照合装置、プログラム、および画像照合方法 |
WO2007094856A2 (en) * | 2005-12-16 | 2007-08-23 | The Research Foundation Of State University Of New York | Method and apparatus for identifying an imaging device |
JP2011077958A (ja) * | 2009-09-30 | 2011-04-14 | Chiba Univ | 次元圧縮装置、次元圧縮方法及び次元圧縮プログラム |
US20120195476A1 (en) * | 2011-01-27 | 2012-08-02 | Sevine Bayram | Sensor fingerprint matching in large image and video databases |
JP2014524693A (ja) * | 2011-08-10 | 2014-09-22 | クアルコム,インコーポレイテッド | 特徴点位置情報の符号化 |
WO2014021785A1 (en) * | 2012-08-02 | 2014-02-06 | Agency For Science, Technology And Research | Testing apparatuses, servers and methods for controlling a testing apparatus |
Non-Patent Citations (2)
Title |
---|
DIEGO VALSESIA ET AL.: "SCALE-ROBUST COMPRESSIVE CAMERA FINGERPRINT MATCHING WITH RANDOM PROJECTIONS", 2015 IEEE INTERNATIONAL CONFERENCE ON ACOUSTICS, SPEECH AND SIGNAL PROCESSING(ICASSP), JPN6020019841, 24 April 2015 (2015-04-24), pages 1697 - 1701, XP033187003, ISSN: 0004282874, DOI: 10.1109/ICASSP.2015.7178260 * |
RUIZHE LI ET AL.: "PCA-BASED DENOISING OF SENSOR PATTERN NOISE FOR SOURCE CAMERA IDEENTIFICATION", 2014 IEEE CHINA SUMMIT & INTERNATIONAL CONFERENCE ON SIGNAL AND INFORMATION PROCESSING(CHINASIP), JPN6020019842, 13 July 2014 (2014-07-13), pages 436 - 440, ISSN: 0004282875 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019536127A (ja) * | 2016-10-19 | 2019-12-12 | ポリテクニコ ディ トリノ | ユーザ機器を認証する装置及び方法 |
JP7024788B2 (ja) | 2016-10-19 | 2022-02-24 | ポリテクニコ ディ トリノ | ユーザ機器を認証する装置及び方法 |
Also Published As
Publication number | Publication date |
---|---|
CN107735783B (zh) | 2021-10-15 |
JP6891379B2 (ja) | 2021-06-18 |
PL3314534T3 (pl) | 2022-01-17 |
US20180157680A1 (en) | 2018-06-07 |
IL256105A (en) | 2018-02-28 |
WO2016207774A1 (en) | 2016-12-29 |
CN107735783A (zh) | 2018-02-23 |
EP3314534A1 (en) | 2018-05-02 |
ES2898868T3 (es) | 2022-03-09 |
EP3314534B1 (en) | 2021-09-01 |
US10515112B2 (en) | 2019-12-24 |
IL256105B (en) | 2022-02-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6891379B2 (ja) | 画像のサーチのための方法およびデバイス | |
JP6780220B2 (ja) | 方法、デバイス、システム、およびプログラム | |
JP5926291B2 (ja) | 類似画像を識別する方法および装置 | |
US10062083B2 (en) | Method and system for clustering and classifying online visual information | |
US20240022648A1 (en) | Systems and methods for data deduplication by generating similarity metrics using sketch computation | |
Breitinger et al. | A fuzzy hashing approach based on random sequences and hamming distance | |
US11119995B2 (en) | Systems and methods for sketch computation | |
Valsesia et al. | Large-scale image retrieval based on compressed camera identification | |
US20160019211A1 (en) | A process for obtaining candidate data from a remote storage server for comparison to a data to be identified | |
Cattaneo et al. | A scalable approach to source camera identification over Hadoop | |
WO2021127245A1 (en) | Systems and methods for sketch computation | |
JP6192804B2 (ja) | データ圧縮装置およびデータ圧縮方法 | |
Yeoh et al. | A parallelizable chaos-based true random number generator based on mobile device cameras for the Android platform | |
US20210191640A1 (en) | Systems and methods for data segment processing | |
Kokoulin et al. | Development of efficient fault-tolerant storage for multidimensional scientific data using the hough transform | |
Valsesia et al. | Image retrieval based on compressed camera sensor fingerprints | |
WO2024134387A1 (en) | Techniques for securing content to be processed using unidirectional encryption | |
CN112487426A (zh) | 一种系统白名单的确定方法、系统及服务器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190315 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200423 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200616 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20200827 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20201110 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210427 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210506 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6891379 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |