JP6399280B2 - 照合・検索システム、照合・検索サーバ、画像特徴抽出装置、照合・検索方法及びプログラム - Google Patents

Description

本発明は、照合・検索システム、照合・検索サーバ、画像特徴抽出装置、照合・検索方法及びプログラムに関する。

近年、消費者や小売業者等は、製品に対するこだわり意識が高まっている。しかしながら、小売店の店頭におかれる製品は、本当に正規品なのか、又は、正規の代理店から出荷されたものであるのか、消費者や小売業者では、それを知る手段がなかった。

すなわち、従来の製品の流通システムにおいては、生産者と消費者との間に多数の中間業者（数次の卸売り店等）が介在している。このように生産者と消費者との間に多数の中間業者が介在していることに起因して、製品が消費者の手に渡る際には、当該製品の個体情報（当該製品の生産地、生産者名、種類、生産日、品質情報等）が正確に伝えられることは困難であった。

上記製品管理として代表的なものとして、消費者等が農産物の個体情報を容易に知ることができる農産物の個体情報入手システムが提案されている（例えば、特許文献１）。

特許文献１の技術は、例えば、メロンのような農産物に、個体毎に異なる識別子であるＩＤ番号を付与することにより、これらメロンの生産に係る者（生産農家或は農業協同組合）以外の者（例えば、消費者）が上記ＩＤ番号に基づいて当該メロンに係る個体情報を入手自在とするものである。このために、農産物には、ＩＤ番号を記載したラベル（シール或はステッカー）が貼付される。

また、別途設けた中立の機関（例えば、データベース法人）に備えられたコンピュータシステムに、農産物に関する個体情報を、上記ＩＤ番号とともに記憶させ、データベースを構築している。生産者は、このコンピュータシステムに、上記ＩＤ番号を送信するとともに、当該農産物の個体情報である、生産地と、生産者名と、品種と、栽培方法と、収穫日と、品質情報（糖度等）とを送信する。

小売業者の店舗や消費者の自宅等には少なくとも１台のコンピュータを設置するとともに、一般公衆回線を介して上記コンピュータシステムと通信自在に接続している。そして、小売業者の店舗や消費者は、コンピュータから、農産物に貼付されているラベルに記載されているＩＤ番号をコンピュータシステムに送信することにより、そのＩＤ番号によって特定される農産物に関する個体情報を入手することができる。

また、流通業者等が在庫している農林水産物を管理する際にも、個々の在庫品について、在庫管理において区別すべき情報（たとえば、鮮度につながる入荷日、収穫日、加工目的に応じて異なる含有成分量などの品質情報、など）を知る必要がある。その一例として、入荷日の古い在庫品は、同一品種の新しいものよりも先に、価格を下げて販売するなどといったことを行う。従来では、上述した技術と同様に、農産物にラベル・ＩＤ番号を付与することによって、当該ＩＤ番号に基づいて在庫管理情報をコンピュータシステムで検索している。

特許第３３５５３６６号公報

しかしながら、特許文献１のように製品にラベル（シール或はステッカー）を貼付して、或いは、包装材等によって個体を識別する方法では、故意にラベル(以下、ラベルと包装材を含めてラベルと称す)を製品から剥がし、あるいは複製・模造し、他の同様な製品に貼付されると、製品の出荷元などの偽装を防ぐことができなかった。

また、製品にラベルの貼り付けができなかったり、はがれてしまったりした場合に、個体毎の在庫管理情報を検索することができなかった。

更に、生産者・小売業者等においては、同一製品を複数保有している場合に、それらを区別して出荷先や在庫調整等の管理を行うためには、個体毎の情報を検索するために、個々の製品に個別に異なるシリアルナンバーを書き込んだり、それを読取可能なラベルやタグを取り付ける必要があり、単一のラベルや印刷を用いる場合に比べ、コストがかかるという問題があった。

更に、微小な部品や食品など、製品自体への書き込みやラベル・タグの取り付けが不可能なものや、製品単価が安いためにこうした個体毎に異なるタグを作成するコストが障害となって利用できない、といった製品がある。このような製品では、特許文献１のように製品にラベル（シール或はステッカー）を貼付するシステムは用いることができず、生産者・流通業者・小売業者・消費者とも、個々の製品を区別し、最適に管理する手段がなかった。

また、工場内の抜き取り品質検査、例えば、１つの製品がどのロットに属するかを検索したいなど場合、同一製品の個々についての情報（製造時期、製造担当者、製造方法など、同一製品でも個々の製品で異なる情報）を、大量の製品から、正確に伝え、個々の製品を区別し管理することは困難であった。

一方、ラベルのような貼付物に代えて、ＩＣタグのようなものを製品に埋め込むことも考えられるが、例えば、皮製品やハードディスクのような工業製品では製品に傷を与え、商品価値が低下してしまう。また、ＩＣタグを用いるので、システム全体として高価となる課題があった。

そこで、本発明は上記課題に鑑みて発明されたものであって、その目的はＩＣタグなどの特別な装置が不要で、製品の個別の個体に関する情報の照合や検索ができる照合・検索システム、照合・検索サーバ、画像特徴抽出装置、照合・検索方法及びプログラムを提供することにある。

本発明は、製品に共通して存在する基準部位と、前記基準部位を基準として相対的な位置にあらかじめ決定される前記製品の所定照合領域とを少なくとも含む画像を撮像する第１の撮像手段と、前記第１の撮像手段で撮像された画像から、前記基準部位を検出し、検出した基準部位を基準とした前記照合領域の画像特徴を抽出する製品特徴抽出手段と、前記抽出された製品の照合領域の画像特徴が記憶される記憶手段と、照合対象の製品の前記基準部位と、前記基準部位を基準とした前記製品の所定照合領域とを少なくとも含む画像を撮像する第２の撮像手段と、前記第２の撮像手段で撮像された画像から、照合対象の製品の基準部位を検出し、前記基準部位を基準とした照合領域の画像特徴を抽出する照合対象製品特徴抽出手段と、前記記憶されている画像特徴と、前記照合対象の製品の照合領域の画像特徴とを照合する照合・検索手段とを有する照合・検索システムである。

本発明は、生産者又は流通業者から生産又は出荷された製品と、照合対象の製品とを照合する照合サーバであって、製品に共通して存在する基準部位を基準として相対的な位置にあらかじめ決定される前記製品の所定照合領域の画像特徴が記憶される記憶手段と、照合対象の製品の画像を受信し、受信した画像から製品の基準部位を検出し、前記基準部位を基準とした照合領域の画像特徴を抽出する照合対象製品特徴抽出手段と、前記記憶されている画像特徴と、前記照合対象の製品の照合領域の画像特徴とを照合する照合手段とを有する照合・検索サーバである。

本発明は、生産者又は流通業者から生産又は出荷される製品、並びに、照合対象の製品の画像から、前記製品に共通して存在する基準部位を検出し、前記検出した基準部位を基準として相対的な位置にあらかじめ決定される照合領域の画像特徴を抽出する特徴抽出手段を有する画像特徴抽出装置である。

本発明は、製品に対して同一のパターンで形成された所定部位を基準部位とし、前記基準部位に対して相対的に一定の位置に存在する領域を照合領域とし、前記照合領域における製品の画像特徴を製品の照合・検索に用いる照合・検索方法である。

本発明は、コンピュータに、生産者又は流通業者から生産又は出荷される製品、並びに、照合対象の製品の画像から、前記製品に共通して存在する基準部位を検出し、前記検出した基準部位を基準として相対的な位置にあらかじめ決定される照合領域の画像特徴を抽出する処理を実行させるプログラムである。

本発明は、生産者又は流通業者から生産又は出荷される製品、並びに、照合対象の製品の画像から、前記製品に共通して存在する基準部位を検出し、前記検出した基準部位を基準として相対的な位置にあらかじめ決定される照合領域の画像特徴を抽出する特徴抽出手段と、予め記憶されている画像特徴と、前記照合対象の製品の照合領域の画像特徴とを照合する照合手段とを有する照合装置。

本発明は、ＩＣタグなどの特別な装置が不要で、製品の真贋判定のための照合、あるいは、同一製品であっても個体毎に異なる管理情報の検索を実行することができる。

図１は本発明の実施の形態のブロック図である。 図２は照合領域を説明するための図である。 図３は照合領域を説明するための図である。 図４は管理情報検索システムの実施例のブロック図である。 図５は管理情報検索端末装置を説明するための図である。

本発明の実施の形態を説明する。

図１は本発明の実施の形態のブロック図である。

本発明の実施の形態は、製品に共通して存在する基準部位と、基準部位を基準として相対的な位置にあらかじめ決定される製品の所定照合領域とを少なくとも含む画像を撮像する撮像部１と、撮像部１で撮像された画像から、基準部位を検出し、検出した基準部位を基準とした照合領域の画像特徴を抽出する製品特徴抽出部２と、抽出された製品の照合領域の画像特徴が記憶される記憶部３と、照合対象の製品の基準部位と、基準部位を基準とした製品の所定照合領域とを少なくとも含む画像を撮像する撮像部４と、撮像部４で撮像された画像から、照合対象の製品の基準部位を検出し、基準部位を基準とした照合領域の画像特徴を抽出する照合対象製品特徴抽出部５と、記憶部３に記憶されている画像特徴と、照合対象の製品の照合領域の画像特徴とを照合する照合・検索部６とを有する製品照合・検索システムである。

本発明は、製品の表面パターンが個体によって微妙に異なることを利用し、その製品の照合・検索を行うものである。尚、本発明が適用される製品は、製品の表面が各個体により異なるものであれば、特に限定されないが、製品の具体例としては、例えば、皮革製品、金属加工部品、鋳造された樹脂、陶器部分を持つ工業製品（例えば、半導体チップなど）などがある。また、製品の表面パターンには、例えば、皮革製品の表面紋様や、鋳造された樹脂、陶器部分の微小な凹凸等がある。

また、生産者又は流通業者とは、生産に係る者（工業製品の生産会社等）や、流通過程において製品の流通、品質管理を行う者（卸売業者、小売店や代理店等）などを含む概念である。

また、製品の基準部位とは、製品に貼付、印刷、刻印、焼印された製品の商標、ロゴ、製造者名、製造会社、ブランド名、製品名、製品番号等である。これらの基準部位は、同一製品であれば同一のパターンを共通に保有しており、外観上の特徴的な見え方をする。そして、これらの基準部位の位置姿勢を基準として定め、その特徴を製品特徴抽出部２及び照合対象製品特徴抽出部５が記憶しておく。尚、この基準部位は個体毎に変更する必要がないため、従来の個体毎に異なる識別子、例えば、管理用のタグ等を付与する手段と比べ、コストが安いという利点がある。

また、照合領域とは、製品に対して照合を行うための、基準部位を基準として相対的な位置にあらかじめ決定される製品の表面の一部の領域をいう。照合領域の設定位置は、製品に貼付、印刷、刻印、焼印された製品の商標、ロゴ、製造者名、製造会社、ブランド名、製品名、製品番号（基準部位）を基準に相対的な位置に照合領域を設定する。例えば、製品が革製品の財布の場合、図２に示すように、財布に刻印されたロゴ１０の文字「Ａ」の頂部の頂点を基準としてその頂点から上方向３０度の長さＸｃｍの位置を照合領域１１の右上頂点とし、この右上頂点から下方向３０度の長さＹｃｍの対角線で定まる矩形範囲を照合領域１１とするように設定する。このように照合領域１１を設定すれば、ロゴ１０は、通常同一のものが使用されるので、ロゴ１０を基準として相対的な位置にある照合領域１１を確実に識別することができる。

尚、上記の例は一例であり、これに限られない。例えば、ロゴ１０の縦横の倍数の範囲を照合領域とすることもできるし、ロゴ１０の下の位置に照合領域の設定することもできる。照合領域の位置や範囲をロゴの大きさを基準とした相対値で指定することにより、既知のロゴの大きさや形状を基準として、画像を撮影した際の対象物の位置や向き、撮影手段との距離などを補正することが可能となる。

他の例を図３に示す。図３は、ハードディスクのような金属製品の例である。図３の場合は、ハードディスクに貼付されたラベルを基準とし、ラベル１２から離れた位置に照合領域１３を設定した場合である。ハードディスクのような金属製品であっても、その表面には微小な凹凸があり、個体毎に異なっている。従って、ラベルを基準とした照合領域の表面の微小な凹凸も個体ごとに異なり、各個体を照合することができる。

また、照合領域１３がラベル１２から離れた位置にあっても、ラベル１２を検出することができれば、ラベル１２の位置から相対的な位置にある照合領域１３も検出することができる。例えば、ラベル１２の左下頂点を基準としてその左下頂点から下方向４５度の長さＸｃｍの位置を照合領域１１の右上頂点とし、この右上頂点から下方向４５度の長さＹｃｍの対角線で定まる矩形範囲を照合領域１３とするように予め設定しておけば、検出は容易である。

次に、各部の構成について説明する。

撮像部１は、生産に係る者（工業製品の生産会社等）や、流通過程において製品の流通や品質管理を行う者側に存在し、生産者等により、製品の基準部位及び照合領域を撮像するものである。撮像部１は、製品の照合領域を撮像する為の特別の装置を設けても良いが、ＣＣＤやＣＭＯＳ等を備えたデジタルカメラや、携帯電話等でもかまわない。また、撮像された画像のファイル形式も問わず、ＪＰＥＧ等で良い。

製品特徴抽出部２は、撮像部１で撮像された画像から基準部位を検出し、その基準部位を基準とした照合領域の画像特徴を抽出するものである。このため、製品特徴抽出部２は、予め製品の基準部位の特徴が予め記憶されており、その特徴に基づいて、撮像部１で撮像された画像から基準部位を検出する。このとき、画像上の基準部位の位置、姿勢により、この基準部位を基準として予め定められた照合領域を正規化し、その正規化した照合領域の画像特徴を抽出する。画像特徴の抽出は、画像の輝度値、特徴点、２値化画像の線の変曲点、交点、端点及び中心点など、指紋の画像特徴の抽出技術を用いることができる。このようにして抽出された複数の製品の画像特徴は、記憶部３に記憶される。尚、記録部３に記録（登録）された製品を、以下、登録製品と記載する。

更に、登録製品の画像特徴に対して、その製品の工場や、生産者名、ロット番号、生産日、品質情報の製造情報や、出荷場所や出荷日等の管理情報等と関連付けて記憶させても良い。このようにすることにより、照合された製品の管理情報も取得できる。

撮像部４及び照合対象製品特徴抽出部５は、小売店や流通管理者、消費者等の製品の照合を行う側に存在し、撮像部１及び製品特徴抽出部２と同様な構成である。

照合・検索部６は、照合対象製品特徴抽出部５で抽出された、照合対象の製品の照合領域の画像特徴と、記憶部３に記憶されている登録製品の照合領域の画像特徴とを照合し、合致するものがある場合、照合対象の製品が登録製品であると判定する。ここで、画像特徴の照合方法であるが、例えば、表面パターンの線の端点、交点、角を特徴点とし、特徴点の配置を照合し、同じ位置（ある閾値以内の範囲）にある特徴点の組数が所定数以上である場合同一と判定する。このような照合技術は、既存の指紋照合の技術を用いることができる。

以上の如く、本実施の形態によれば、特別なタグが不要で、製品の照合判定を行うことができ、製品の生産者や卸業者から正規に出荷される製品の流通管理を行うことができ、すり替えなどの偽装を防止することができる。

また、製品の画像特徴に対応させて、その製品の生産場所や、工場名、生産者名、ロッド番号、生産日、品質情報等の製造情報や、出荷場所や出荷日等の流通情報等の管理情報と関連付けて記憶させておけば、照合・検索時に合致した画像特徴に対応する管理情報等を照合結果と共に出力することもでき、消費者側でその製品の管理情報も知ることができる。

以下に、上述した実施の形態における照合システムを用いた管理情報検索システムを述べる。尚、本例の管理情報検索システムは、工場の抜き取り検査のように、多くの製品からひとつの製品を抜き取り、その製品の品質検査を行うような場合において、その製品のロット番号や生産したライン番号などの管理情報を検索したい場合などを想定している。

図４は管理情報検索システムの実施例のブロック図である。

図４に示されるごとく、管理情報検索システムは、財布の生産側に設置される特徴抽出装置１００と、照合を行う照合・検索サーバ２００と、品質管理者側に設けられる照会装置３００とを備える。

画像特徴抽出装置１００は、撮像部１０１と、製品特徴抽出部１０２と、送信部１０３とを有する。尚、撮像部１０１及び製品特徴抽出部１０２は、上述した撮像部１及び製品特徴抽出部２と同様な構成である。送信部１０３は、製品特徴抽出部１０２で抽出された財布の照合領域の画像特徴と、その照合の管理情報（製造地、生産者名、ロッド番号、生産日、品質情報等）とを送信する。

照合サーバ２００は、データベース２０１と、検索対象製品特徴抽出部２０２と、照合・検索部２０３とを有する。検索対象製品特徴抽出部２０２及び照合・検索部２０３は、上述した照合対象製品特徴抽出部５及び照合・検索部６と同様な構成である。データベース２０１には、生産者側の画像特徴抽出装置１００から送信された同一の製品の各財布の照合領域の画像特徴と、その財布の管理情報とが関連付けて記憶される。

照会装置３００は、撮像部３０１と、送受信部３０２とを有する。撮像部３０１は、上述した撮像部４と同様な構成である。送信部３０２は、撮像部３０１で撮像された財布の画像を、照合サーバ２００に送信する。また、照合サーバ２００からの検索結果を受信する。

次に、上記構成における動作を説明する。

まず、財布の表面紋様の画像特徴の登録動作について説明する。

生産者は、図２に示すような財布に刻印されたロゴ１０の画像特徴とロゴ１０を基準とした照合領域の位置を予め製品特徴抽出部１０２に登録しておく。そして、撮像部１０１により、ロゴ１０とロゴ１０を基準とする照合領域を含む財布の表面を撮影する。

製品特徴抽出部１０２は、撮像された財布の画像から、ラベル１０を検出し、検出されたラベル１０を基準とする照合領域の表面紋様の画像特徴を抽出する。このとき、画像上のロゴ１０の位置、姿勢により、このロゴ１０を基準として予め定められた照合領域を正規化し、その正規化した照合領域の画像特徴を抽出する。

また、生産者は、撮影した財布の管理情報（製造地、生産者名、ロッド番号、生産日、品質情報等）を、画像特徴抽出装置１００に入力する。そして、送信部１０３は、財布の画像特徴とその財布の管理情報とを照合サーバ２００に送信する。この処理を登録したい製品数だけ行う。

照合サーバ２００では、生産者の画像特徴抽出装置１００からの財布の画像特徴とその財布の管理情報とを、データベース２０１に登録する。

続いて、検索処理の動作について説明する。

管理者は、照合対象となる財布の照合を行うため、照会装置３００の撮像部３０１により、ロゴ１０を含む照合領域の財布の表面を撮像する。撮像された画像は、送受信部３０２により、照合サーバ２００に送信される。

照合サーバ２００の照合対象製品特徴抽出装置２０２は、送られてきた画像から、上述した方法と同様な方法により、照合対象の財布のロゴ１０を検出し、検出されたロゴ１０から照合領域の表面紋様の画像特徴を抽出する。そして、抽出した画像特徴を照合・検索部２０３に出力する。

照合・検索部２０３では、受信した検索対象の製品の画像特徴と最も類似する画像特徴を、データベース２０１に登録されている画像特徴から検索する。そして、その画像特徴と関連付けられている管理情報を読み出し、照会装置３００に送信する。ここで、照合・検索部２０３が、所定の閾値以上の類似度を持つものを検索して真贋判定のような照合を行っているのではなく、検索対象の製品の画像特徴と最も類似する画像特徴を、データベース２０１に登録されている画像特徴から検索するように構成している。何故なら、品質検査などの場合は偽物が入るというこが考えにくく、真正品と偽物とを厳密に照合する真贋判定の処理は必要ないからである。

照会装置３００では、照合サーバ２００から管理情報を受信し、管理者に通知する。

このように、本実施例では、管理者が特別の機材を持たなくても、大量の製品からある特定の製品の管理情報を検索することができる。

尚、上述した実施例では、初めに製品の画像特徴を抽出する製品特徴抽出部１０２を、生産者側の装置に設置する構成としたが、照合サーバ２００の検索対象製品特徴抽出部２０２と兼ねることもできる。この場合、生産者側からは、製品の照合領域の画像を送信するように構成する。

また、上述した実施例では、照合サーバ２００を設け、各管理者側が通信により、照合処理を行ったが、データベース２０１のような製品の表面紋様の画像と管理情報とが登録されているデータベースから、登録されている複数の製品の特徴と管理情報とを予めダウンロードしておき、通信を介さずに検索処理を行っても良い。このような管理情報検索装置は、図５に示す如く、生産者等に登録される登録製品の表面紋様の画像特徴と管理情報とを記憶する記憶部３００と、撮像部３０１と、検索対象製品特徴抽出部３０２と、照合・検索部３０３と、表示部３０４とを備える。撮像部３０１と、検索対象製品特徴抽出部３０２と、照合・検索部３０３は、上述した撮像部と、検索対象製品特徴抽出部と、照合・検索部３０３と同様な構成であり、表示部３０４は照合・検索部３０３の管理情報等が表示される。

また、上述した説明からも明らかなように、特徴抽出部や照合・検索部をハードウェアで構成することも可能であるが、コンピュータプログラムにより実現することも可能である。この場合、プログラムメモリに格納されているプログラムで動作するプロセッサによって、上述した実施の形態及び実施例と同様の機能、動作を実現させる。

また、上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。

（付記１） 製品に共通して存在する基準部位と、前記基準部位を基準として相対的な位置にあらかじめ決定される前記製品の所定照合領域とを少なくとも含む画像を撮像する第１の撮像手段と、
前記第１の撮像手段で撮像された画像から、前記基準部位を検出し、検出した基準部位を基準とした前記照合領域の画像特徴を抽出する製品特徴抽出手段と、
前記抽出された製品の照合領域の画像特徴が記憶される記憶手段と、
照合対象の製品の前記基準部位と、前記基準部位を基準とした前記製品の所定照合領域とを少なくとも含む画像を撮像する第２の撮像手段と、
前記第２の撮像手段で撮像された画像から、照合対象の製品の基準部位を検出し、前記基準部位を基準とした照合領域の画像特徴を抽出する照合対象製品特徴抽出手段と、
前記記憶されている画像特徴と、前記照合対象の製品の照合領域の画像特徴とを照合する照合・検索手段と
を有する照合・検索システム。

（付記２） 前記基準部位は、製品に貼付、印刷、刻印、焼印された製品の商標、ロゴ、製造者名、製造会社、ブランド名、製品名、製品番号である
付記１に記載の照合・検索システム。

（付記３） 前記製品特徴抽出手段及び前記照合対象製品特徴抽出手段は、前記基準部位の特徴と前記基準部位を基準とする照合領域の位置が予め記憶され、前記所定部位の特徴に基づいて前記撮像された画像から前記製品の所定部位を検出し、前記検出された所定部位を基準として照合領域の位置及び大きさ正規化して前記照合領域の画像特徴を抽出する
付記１又は付記２に記載の照合・検索システム。

（付記４） 前記製品が、皮革製品、金属加工部品、鋳造された樹脂、陶器部分を持つ工業製品である
付記１から付記３のいずれかに記載の照合・検索システム。

（付記５） 前記記憶手段には、検索対象となる複数の製品について抽出された照合領域の複数の画像特徴と、前記製品に対応する管理情報とが対応付けられて記憶され、
前記照合・検索手段は、前記照合対象の製品の照合領域の画像特徴と最も類似する画像特徴を、前記記憶されている複数の画像特徴から検索し、最も類似する画像特徴に対応する製品の管理情報を出力する
付記１から付記４のいずれかに記載の照合・検索システム。

（付記６） 生産者又は流通業者から生産又は出荷された製品と、照合対象の製品とを照合する照合サーバであって、
製品に共通して存在する基準部位を基準として相対的な位置にあらかじめ決定される前記製品の所定照合領域の画像特徴が記憶される記憶手段と、
照合対象の製品の画像を受信し、受信した画像から製品の基準部位を検出し、前記基準部位を基準とした照合領域の画像特徴を抽出する照合対象製品特徴抽出手段と、
前記記憶されている画像特徴と、前記照合対象の製品の照合領域の画像特徴とを照合する照合手段と
を有する照合・検索サーバ。

（付記７） 生産者又は流通業者から生産又は出荷される製品の画像を受信し、受信した画像から製品の基準部位を検出し、前記基準部位を基準とした照合領域の画像特徴を抽出し、抽出した照合領域の画像特徴を、前記記憶手段に登録する製品特徴抽出手段を有する
付記６に記載の照合・検索サーバ。

（付記８） 前記製品特徴抽出手段及び前記照合対象製品特徴抽出手段は、前記基準部位の特徴と前記基準部位を基準とする照合領域の位置が予め記憶され、前記所定部位の特徴に基づいて前記撮像された画像から前記製品の所定部位を検出し、前記検出された所定部位を基準として照合領域の位置及び大きさ正規化して前記照合領域の画像特徴を抽出する
付記６又は付記７に記載の照合・検索サーバ。

（付記９） 前記記憶手段には、検索対象となる複数の製品について抽出された照合領域の複数の画像特徴と、前記製品に対応する管理情報とが対応付けられて記憶され、
前記照合・検索手段は、前記照合対象の製品の照合領域の画像特徴と最も類似する画像特徴を、前記記憶されている複数の画像特徴から検索し、最も類似する画像特徴に対応する製品の管理情報を出力する
付記６から付記８のいずれかに記載の照合・検索サーバ。

（付記１０） 生産者又は流通業者から生産又は出荷される製品、並びに、照合対象の製品の画像から、前記製品に共通して存在する基準部位を検出し、前記検出した基準部位を基準として相対的な位置にあらかじめ決定される照合領域の画像特徴を抽出する特徴抽出手段を有する
画像特徴抽出装置。

（付記１１） 前記特徴抽出手段は、前記基準部位の特徴と前記基準部位を基準とする照合領域の位置が予め記憶され、前記所定部位の特徴に基づいて前記撮像された画像から前記製品の所定部位を検出し、前記検出された所定部位を基準として照合領域の位置及び大きさ正規化して前記照合領域の画像特徴を抽出する
付記１０に記載の画像特徴抽出装置。

（付記１２） 前記照合領域の画像特徴を、照合サーバに送信する送信手段を有する
付記１０又は付記１１に記載の画像特徴抽出装置。

（付記１３） 製品に対して同一のパターンで形成された所定部位を基準部位とし、
前記基準部位に対して相対的に一定の位置に存在する領域を照合領域とし、
前記照合領域における製品の画像特徴を製品の照合・検索に用いる
照合・検索方法。

（付記１４） 製品に共通して存在する基準部位と、前記基準部位を基準として相対的な位置にあらかじめ決定される前記製品の所定照合領域とを少なくとも含む画像を撮像し、
前記撮像された画像から、前記基準部位を検出し、検出した基準部位を基準とした前記照合領域の画像特徴を抽出し、
前記抽出された製品の照合領域の画像特徴を記憶し、
照合対象の製品の前記基準部位と、前記基準部位を基準とした前記製品の所定照合領域とを少なくとも含む画像を撮像し、
前記撮像された画像から、照合対象の製品の基準部位を検出し、前記基準部位を基準とした照合領域の画像特徴を抽出し、
前記記憶されている画像特徴と、前記照合対象の製品の照合領域の画像特徴とを照合する
付記１３に記載の照合・検索方法。

（付記１５） 前記基準部位は、製品に貼付、印刷、刻印、焼印された製品の商標、ロゴ、製造者名、製造会社、ブランド名、製品名、製品番号である
付記１３又は付記１４に記載の照合・検索方法。

（付記１６） 前記画像特徴の抽出は、前記基準部位の特徴と前記基準部位を基準とする照合領域の位置が予め記憶しておき、前記所定部位の特徴に基づいて前記撮像された画像から前記製品の所定部位を検出し、前記検出された所定部位を基準として照合領域の位置及び大きさ正規化して前記照合領域の画像特徴を抽出する
付記１３又は付記１５に記載の照合・検索方法。

（付記１７） 検索対象となる複数の製品について抽出された照合領域の複数の画像特徴と、前記製品に対応する管理情報とを対応付けて記憶しておき、
前記照合対象の製品の照合領域の画像特徴と最も類似する画像特徴を、前記記憶されている複数の画像特徴から検索し、最も類似する画像特徴に対応する製品の管理情報を出力する
付記１３から付記１６のいずれかに記載の照合・検索方法。

（付記１８） 前記製品が、皮革製品、金属加工部品、鋳造された樹脂、陶器部分を持つ工業製品である
付記１３から付記１７のいずれかに記載の照合・検索方法。

（付記１９） コンピュータに、生産者又は流通業者から生産又は出荷される製品、並びに、照合対象の製品の画像から、前記製品に共通して存在する基準部位を検出し、前記検出した基準部位を基準として相対的な位置にあらかじめ決定される照合領域の画像特徴を抽出する処理を実行させるプログラム。

（付記２０） コンピュータに、前記照合対象の製品の照合領域の画像特徴と、予め記憶された製品の照合領域の画像特徴とを照合する処理を実行させる付記１９に記載のプログラム。

（付記２１） コンピュータに、検索対象となる複数の製品について抽出された照合領域の複数の画像特徴と、前記製品に対応する管理情報とが対応付けられて記憶されているデータベースから、前記照合対象の製品の照合領域の画像特徴と最も類似する画像特徴を、前記記憶されている複数の画像特徴から検索し、最も類似する画像特徴に対応する製品の管理情報を出力する処理を実行させる
付記１８から付記１９のいずれかに記載のプログラム。

（付記２２） 生産者又は流通業者から生産又は出荷される製品、並びに、照合対象の製品の画像から、前記製品に共通して存在する基準部位を検出し、前記検出した基準部位を基準として相対的な位置にあらかじめ決定される照合領域の画像特徴を抽出する特徴抽出手段と、
予め記憶されている画像特徴と、前記照合対象の製品の照合領域の画像特徴とを照合する照合手段と
を有する照合装置。

以上好ましい実施の形態及び実施例をあげて本発明を説明したが、本発明は必ずしも上記実施の形態及び実施例に限定されるものではなく、その技術的思想の範囲内において様々に変形し実施することが出来る。

本出願は、２０１１年７月２９日に出願された日本出願特願２０１１−１６６７８９号を基礎とする優先権を主張し、その開示の全てをここに取り込む。

１ 撮像部
２ 製品特徴抽出部
３ 記憶部
４ 撮像部
５ 照合対象製品特徴抽出部
６ 照合・検索部

Claims (22)

1. 製品に共通して存在する、製品毎に変更する必要がない基準部位と、前記基準部位を基準として相対的な位置及び範囲にあらかじめ決定される前記製品の所定照合領域とを少なくとも含む画像を撮像する第１の撮像手段と、
   前記第１の撮像手段で撮像された画像から、前記基準部位を検出し、検出した基準部位を基準とした前記照合領域の画像特徴を抽出する製品特徴抽出手段と、
   前記製品特徴抽出手段により抽出された複数の製品の照合領域の画像特徴が記憶される記憶手段と、
   照合対象の製品の前記基準部位と、前記基準部位を基準とした前記製品の所定照合領域とを少なくとも含む画像を撮像する第２の撮像手段と、
   前記第２の撮像手段で撮像された画像から、照合対象の製品の基準部位を検出し、前記基準部位を基準とした照合領域の画像特徴を抽出する照合対象製品特徴抽出手段と、
   前記記憶手段に記憶されている複数の製品の画像特徴と、前記照合対象の製品の照合領域の画像特徴とを照合する照合・検索手段と
   を有し、
   前記照合領域の位置及び範囲を、前記基準部位の大きさを基準とした相対値によって記憶しており、
   前記照合対象製品特徴抽出手段は、前記第２の撮像手段によって撮像された画像上の基準部位を検出し、検出した基準部位の大きさと前記相対値とを用いて、前記第２の撮像手段により撮像された画像の照合領域を検出する
   照合・検索システム。
2. 前記基準部位は、製品に貼付、印刷、刻印、焼印された製品の商標、ロゴ、製造者名、製造会社、ブランド名、製品名、製品番号である
   請求項１に記載の照合・検索システム。
3. 前記製品特徴抽出手段及び前記照合対象製品特徴抽出手段は、前記基準部位の特徴と前記基準部位を基準とする照合領域の位置が予め記憶され、前記基準部位の特徴に基づいて前記撮像された画像から前記製品の基準部位を検出し、前記検出された基準部位を基準として照合領域の位置及び大きさを正規化して前記照合領域の画像特徴を抽出する
   請求項１又は請求項２に記載の照合・検索システム。
4. 前記製品が、皮革製品、金属加工部品、鋳造された樹脂、陶器部分を持つ工業製品である
   請求項１から請求項３のいずれかに記載の照合・検索システム。
5. 前記記憶手段には、検索対象となる複数の製品について抽出された照合領域の複数の画像特徴と、前記製品に対応する管理情報とが対応付けられて記憶され、
   前記照合・検索手段は、前記照合対象の製品の照合領域の画像特徴と最も類似する画像特徴を、前記記憶されている複数の画像特徴から検索し、最も類似する画像特徴に対応する製品の管理情報を出力する
   請求項１から請求項４のいずれかに記載の照合・検索システム。
6. 生産者又は流通業者から生産又は出荷された製品と、照合対象の製品とを照合する照合サーバであって、
   製品に共通して存在する、製品毎に変更する必要がない基準部位を基準として相対的な位置及び範囲にあらかじめ決定される前記製品の所定照合領域の画像特徴が複数の製品について記憶される記憶手段と、
   照合対象の製品の画像を受信し、受信した画像から製品の基準部位を検出し、前記基準部位を基準とした照合領域の画像特徴を抽出する照合対象製品特徴抽出手段と、
   前記記憶されている複数の製品の画像特徴と、前記照合対象の製品の照合領域の画像特徴とを照合する照合手段と
   を有し、
   前記照合領域の位置及び範囲を、前記基準部位の大きさを基準とした相対値によって記憶しており、
   前記照合対象製品特徴抽出手段は、前記受信した画像上の基準部位を検出し、検出した基準部位の大きさと前記相対値とを用いて、前記受信した画像の照合領域を検出する
   する照合・検索サーバ。
7. 生産者又は流通業者から生産又は出荷される製品の画像を受信し、受信した画像から製品の基準部位を検出し、前記基準部位を基準とした照合領域の画像特徴を抽出し、抽出した照合領域の画像特徴を、前記記憶手段に登録する製品特徴抽出手段を有する
   請求項６に記載の照合・検索サーバ。
8. 前記基準部位の特徴と前記基準部位を基準とする照合領域の位置が予め記憶され、前記基準部位の特徴に基づいて、前記受信した画像から前記製品の基準部位を検出し、前記検出された基準部位を基準として照合領域の位置及び大きさを正規化して前記照合領域の画像特徴を抽出する
   請求項６又は請求項７に記載の照合・検索サーバ。
9. 前記記憶手段には、検索対象となる複数の製品について抽出された照合領域の複数の画像特徴と、前記製品に対応する管理情報とが対応付けられて記憶され、
   前記照合手段は、前記照合対象の製品の照合領域の画像特徴と最も類似する画像特徴を、前記記憶されている複数の画像特徴から検索し、最も類似する画像特徴に対応する製品の管理情報を出力する
   請求項６から請求項８のいずれかに記載の照合・検索サーバ。
10. 生産者又は流通業者から生産又は出荷される製品、並びに、照合対象の製品の画像から、前記製品に共通して存在する、製品毎に変更する必要がない基準部位を検出し、前記検出した基準部位を基準として相対的な位置及び範囲にあらかじめ決定される照合領域の画像特徴を抽出する特徴抽出手段を有し、
    前記抽出される画像特徴は、複数の製品の画像特徴と照合するためのものであり、
    前記照合領域の位置及び範囲を、前記基準部位の大きさを基準とした相対値によって記憶しており、
    前記特徴抽出手段は、製品の画像上の基準部位を検出し、検出した基準部位の大きさと前記相対値とを用いて、前記製品の画像の照合領域を検出する
    画像特徴抽出装置。
11. 前記特徴抽出手段は、前記基準部位の特徴と前記基準部位を基準とする照合領域の位置が予め記憶され、前記基準部位の特徴に基づいて前記製品の画像から前記製品の基準部位を検出し、前記検出された基準部位を基準として照合領域の位置及び大きさを正規化して前記照合領域の画像特徴を抽出する
    請求項１０に記載の画像特徴抽出装置。
12. 前記照合領域の画像特徴を、照合サーバに送信する送信手段を有する
    請求項１０又は請求項１１に記載の画像特徴抽出装置。
13. 製品に対して同一のパターンで形成された、製品毎に変更する必要がない所定部位を基準部位とし、
    前記基準部位に対して相対的に一定の位置及び範囲に存在する領域を照合領域とし、
    前記照合領域における製品の画像特徴を製品の照合・検索に用い、
    前記製品の照合・検索は、前記照合領域における製品の画像特徴を、複数の製品の画像特徴と照合することを含み、
    前記照合領域の位置及び範囲を、前記基準部位の大きさを基準とした相対値によって記憶しておき、
    製品の画像上の基準部位を検出し、検出した基準部位の大きさと前記相対値とを用いて、前記製品の画像の照合領域を検出する
    照合・検索方法。
14. 製品に共通して存在する基準部位と、前記基準部位を基準として相対的な位置にあらかじめ決定される前記製品の所定照合領域とを少なくとも含む画像を撮像し、
    前記撮像された画像から、前記基準部位を検出し、検出した基準部位を基準とした前記照合領域の画像特徴を抽出し、
    前記抽出された製品の照合領域の画像特徴を記憶し、
    照合対象の製品の前記基準部位と、前記基準部位を基準とした前記製品の所定照合領域とを少なくとも含む画像を撮像し、
    前記撮像された画像から、照合対象の製品の基準部位を検出し、前記基準部位を基準とした照合領域の画像特徴を抽出し、
    前記記憶されている画像特徴と、前記照合対象の製品の照合領域の画像特徴とを照合する
    請求項１３に記載の照合・検索方法。
15. 前記基準部位は、製品に貼付、印刷、刻印、焼印された製品の商標、ロゴ、製造者名、製造会社、ブランド名、製品名、製品番号である
    請求項１３又は請求項１４に記載の照合・検索方法。
16. 前記画像特徴の抽出は、前記基準部位の特徴と前記基準部位を基準とする照合領域の位置が予め記憶しておき、前記所定部位の特徴に基づいて前記撮像された画像から前記製品の所定部位を検出し、前記検出された所定部位を基準として照合領域の位置及び大きさを正規化して前記照合領域の画像特徴を抽出する
    請求項１４に記載の照合・検索方法。
17. 検索対象となる複数の製品について抽出された照合領域の複数の画像特徴と、前記製品に対応する管理情報とを対応付けて記憶しておき、
    前記照合対象の製品の照合領域の画像特徴と最も類似する画像特徴を、前記記憶されている複数の画像特徴から検索し、最も類似する画像特徴に対応する製品の管理情報を出力する
    請求項１３から請求項１６のいずれかに記載の照合・検索方法。
18. 前記製品が、皮革製品、金属加工部品、鋳造された樹脂、陶器部分を持つ工業製品である
    請求項１３から請求項１７のいずれかに記載の照合・検索方法。
19. コンピュータに、生産者又は流通業者から生産又は出荷される製品、並びに、照合対象の製品の画像から、前記製品に共通して存在する、製品毎に変更する必要がない基準部位を検出し、前記検出した基準部位を基準として相対的な位置及び範囲にあらかじめ決定される照合領域の画像特徴を抽出する抽出処理を実行させ、
    前記抽出処理により抽出される画像特徴は、複数の製品の画像特徴と照合するためのものであり、
    前記照合領域の位置及び範囲は、前記基準部位の大きさを基準とした相対値によって記憶されており、
    前記抽出処理は、製品の画像上の基準部位を検出し、検出した基準部位の大きさと前記相対値とを用いて、前記製品の画像の照合領域を検出する
    プログラム。
20. コンピュータに、前記照合対象の製品の照合領域の画像特徴と、予め記憶された製品の照合領域の画像特徴とを照合する処理を実行させる請求項１９に記載のプログラム。
21. コンピュータに、検索対象となる複数の製品について抽出された照合領域の複数の画像特徴と、前記製品に対応する管理情報とが対応付けられて記憶されているデータベースから、前記照合対象の製品の照合領域の画像特徴と最も類似する画像特徴を、前記記憶されている複数の画像特徴から検索し、最も類似する画像特徴に対応する製品の管理情報を出力する処理を実行させる
    請求項１９又は請求項２０に記載のプログラム。
22. 生産者又は流通業者から生産又は出荷される製品、並びに、照合対象の製品の画像から、前記製品に共通して存在する、製品毎に変更する必要がない基準部位を検出し、前記検出した基準部位を基準として相対的な位置及び範囲にあらかじめ決定される照合領域の画像特徴を抽出する特徴抽出手段と、
    予め記憶されている複数の製品の画像特徴と、前記照合対象の製品の照合領域の画像特徴とを照合する照合手段と
    を有し、
    前記照合領域の位置及び範囲を、前記基準部位の大きさを基準とした相対値によって記憶しており、
    前記特徴抽出手段は、製品の画像上の基準部位を検出し、検出した基準部位の大きさと前記相対値とを用いて、前記製品の画像の照合領域を検出する
    照合装置。
    

Images