JP5602649B2 - Image search system - Google Patents
Image search system Download PDFInfo
- Publication number
- JP5602649B2 JP5602649B2 JP2011012568A JP2011012568A JP5602649B2 JP 5602649 B2 JP5602649 B2 JP 5602649B2 JP 2011012568 A JP2011012568 A JP 2011012568A JP 2011012568 A JP2011012568 A JP 2011012568A JP 5602649 B2 JP5602649 B2 JP 5602649B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- image
- sensor
- search
- processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
本発明は、撮像手段によって撮像された複数の画像から検索対象の画像と類似する類似画像を検索する画像検索システムに関する。 The present invention relates to an image search system for searching for a similar image similar to a search target image from a plurality of images picked up by an image pickup means.
従来から、デジタルカメラ等の撮像手段によって撮像された複数の画像を蓄積したデータベースから検索対象の画像と類似する類似画像を検索する画像検索システムが知られている。この種の画像検索システムは、一般的に、高度な演算処理を必要とするパターンマッチングを個々の画像(以下において、「被検索対象の画像」と言う)に行って、検索対象の画像と被検索対象の画像との類似度を求め、所定の類似度以上の被検索対象の画像を類似画像と判定し、類似画像を検索するように構成されている。そのため、この種の画像検索システムにおいては、被検索対象の画像データが膨大な場合、多くの計算機リソースが必要となりシステムが高価なものとなってしまうため、処理すべき情報量を減らす様々な工夫が行われている。 2. Description of the Related Art Conventionally, there is known an image search system that searches for a similar image similar to a search target image from a database that stores a plurality of images captured by an imaging unit such as a digital camera. In general, this type of image search system performs pattern matching that requires high-level arithmetic processing on individual images (hereinafter referred to as “images to be searched”), and the images to be searched and the images to be searched. The degree of similarity with the image to be searched is obtained, the image to be searched for having a predetermined similarity or higher is determined as a similar image, and the similar image is searched. For this reason, in this type of image search system, if the search target image data is enormous, many computer resources are required and the system becomes expensive. Has been done.
この種の処理すべき情報を減らす対策が行われた画像検索システムとしては、例えば、特許文献1及び2に記載されたものがある。特許文献1に記載された画像検索システムは、一つの画像を幾つかのブロックに分け、そのブロック毎の濃淡情報や濃淡のレイアウトに関する情報(以下において、「濃淡情報等」と言う)を検索対象及び被検索対象の画像について作成し、検索対象と被検索対象の画像の濃淡情報等をそれぞれ比較して類似度を求め、類似度の高いものがある場合、それに対応する被検索対象の画像を類似画像とする構成である。このように、特許文献1に記載された画像検索システムは、類似度を画像そのものではなく、画像の濃淡情報等を比較して求めることで、処理(比較)すべき情報量を減らす構成である。また、特許文献2に記載された画像検索システムは、検索対象の画像を所定の単純図形とし、この単純図形と被検索対象の画像とをそれぞれ比較して類似度を求め、類似度の高いものがある場合、それに対応する被検索対象の画像を類似画像とする構成である。このように、特許文献2に記載された画像検索システムは、類似度を画像間ではなく、画像と単純図形とを比較して求めることで、処理(比較)すべき情報量を減らす構成である。
As an image search system in which measures for reducing this type of information to be processed are taken, there are those described in
しかしながら、デジタルカメラ等の一般的な撮像手段によって撮像された画像は、例えば、外乱光等の撮像環境条件によって変動してしまうおそれがある。したがって、特許文献1に記載された画像検索システムにおいては、一般的な撮像手段の画像の濃淡情報等が撮像環境条件によって変動してしまい、その結果、検索対象及び被検索対象の画像の濃淡情報等を比較して求めた類似度も変動する可能性がある。そして、特許文献2に記載された画像検索システムにおいては、被検索対象の画像が撮像環境条件によって変動し、例えば、輪郭がぼやけた画像になってしまう可能性があり、その結果、被検索対象の画像と単純図形を比較して求めた類似度も、被検索対象の画像のぼやけ具合等に応じて変動する可能性がある。このように、特許文献1及び2に記載された画像検索システムは、処理すべき情報量を減らして計算機リソースへの負荷を低減することはできるが、撮像環境条件を考慮していないため、例えば、同じ対象物を撮像した画像であっても、類似度が低く異なる画像であると認識してしまう可能性がある。したがって、特許文献1及び2に記載された画像検索システムにおいては、類似画像の検索精度が撮像環境条件による影響を受けて低くなるという問題がある。
However, an image captured by a general imaging unit such as a digital camera may vary depending on an imaging environment condition such as ambient light. Therefore, in the image search system described in
そこで、本発明は上記問題点に着目してなされたもので、外乱光等の撮像環境条件による影響を受けず、安定した検索精度で類似画像を検索することができ、かつ、計算機リソースへの負荷を減らすことが可能な画像検索システムを提供することを目的とする。 Therefore, the present invention has been made paying attention to the above problems, and is not affected by imaging environment conditions such as ambient light, can search for similar images with stable search accuracy, and can be applied to computer resources. An object of the present invention is to provide an image search system capable of reducing the load.
本発明による画像検索システムは、撮像手段による所定領域についての撮像画像の画像情報と、前記撮像画像と同時に得られ該撮像画像より情報量が少なくかつ外乱光の影響が排除された画像を取得可能なセンサによる前記所定領域についてのセンサ画像のセンサ情報とを、関連付けて記憶する記憶手段と、前記センサ情報を用いて、複数の前記撮像画像から選択された対象撮像画像と類似する類似画像を検索する検索処理手段と、を備えて構成されている。 Image retrieval system according to the invention acquires the image information of the captured image, the image effect is eliminated in the captured image at the same time obtained much information captured image and ambient light for a predetermined area by the imaging means and possible the sensor image of the predetermined area sensor information by the sensor, storage means for associating and storing, using said sensor data, similar to the selected target captured image from a plurality of the captured image similarity And a search processing means for searching for an image.
本発明による画像検索システムによれば、外乱光の影響が排除された画像を取得可能なセンサからのセンサ画像のセンサ情報を用いて、複数の撮像画像から選択された対象撮像画像と類似する類似画像を検索することができるため、外乱光による影響を受けずに安定した検索精度で類似画像を検索することができる。また、センサからのセンサ情報は撮像手段からの画像情報よりも情報量が少ないため、センサ情報を用いて類似画像を検索することで、処理すべき情報量を減らすことができ、計算機リソースへの負荷を減らすことができる。このようにして、外乱光による影響を受けずに、従来の画像検索システムよりも安定した検索精度で類似画像を検索することが画像検索システムを提供することができる。また、計算機リソースへの負荷を減らすことが可能な画像検索システムを提供することができる。 According to the image retrieval system according to the present invention, by using the sensor information of the sensor image of an image which the influence of ambient light is excluded from the acquired sensor capable, similar to selected target captured images from a plurality of captured images Since similar images can be searched, similar images can be searched with stable search accuracy without being affected by ambient light . Further, since the sensor information from the sensor has less information than image information from the imaging means, by searching for similar images using the sensor information, it is possible to reduce the amount of information to be processed, the computer resource Can reduce the load. In this way, it is possible to provide an image search system that can search for similar images with more stable search accuracy than conventional image search systems without being affected by disturbance light . In addition, it is possible to provide an image search system that can reduce the load on computer resources.
以下、本発明の実施形態を図面に基づいて説明する。
図1は、本発明による画像検索システムの第1実施形態の概略構成を説明するためのイメージ図であり、図2は、本実施形態による画像検索システムの概略構成を示すブロック図である。
図1及び2おいて、本実施形態による画像検索システムは、撮像手段1によって撮像された複数の画像から検索対象の画像と類似する類似画像を検索するものであり、撮像手段1の画像情報と後述するセンサ2のセンサ情報とを記憶するデータベース部3と、検索対象の画像を選択する操作部4と、検索処理手段5と、表示部6とを備えている。なお、本実施形態において、記憶手段はデータベース部3により構成されている。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
FIG. 1 is an image diagram for explaining a schematic configuration of a first embodiment of an image search system according to the present invention, and FIG. 2 is a block diagram showing a schematic configuration of the image search system according to the present embodiment.
1 and 2, the image search system according to the present embodiment searches for a similar image similar to a search target image from a plurality of images captured by the
前記撮像手段1は、撮像領域7を撮像した画像に関する画像情報を生成し出力可能なものであり、例えば、デジタルカメラ等の一般的なカメラである。図3(a)は、撮像手段1により取得された画像(以下において、後述するセンサ画像と区別する必要がある場合は「カメラ画像」と言う。)のイメージを示す図である。カメラ画像の画素数は、例えば、数百万〜1千万画素程度である。撮像手段1は、カメラ画像のイメージを示す図3(a)と後述するセンサ画像のイメージを示す図3(b)とを比較して分かるように、センサ2よりも高解像度の画像を得ることが可能なものである。カメラ画像は、例えば、外乱光等の撮像環境条件によって変動し、例えば、対象物8の輪郭がぼやけた画像になってしまう可能性がある。
The imaging means 1 is capable of generating and outputting image information relating to an image obtained by imaging the
前記センサ2は、撮像手段1とは異なり、外乱光等の撮像環境条件による影響を排除した画像を取得可能なものであり、撮像手段1と同時に撮像された同一撮像領域7についての画像(以下において、カメラ画像と区別する必要がある場合は「センサ画像」と言う。)に関する情報であるセンサ情報を生成し出力可能なものである。本実施形態においては、センサ情報は、複数の種類の情報を含んでおり、例えば、各画素の濃淡情報と、撮像領域7内の対象物8までの距離情報とを有している。図3(b)は、センサ画像のイメージを示す図である。センサ画像の画素数は、一般的に、カメラ画像の画素数と比較すると桁違いに少なく、例えば、900(30×30)ピクセル程度である。このように、センサ画像の情報量は、カメラ画像の情報量よりも桁違いに少ない。このようなセンサ画像を取得するには、例えば、特開2004−356594号公報に記載の「強度変調光を用いた空間情報の検出装置」等をセンサ2として用いるとよい。
Unlike the
前記データベース部3は、センサ2によって撮像手段1と同時に撮像された同一撮像領域7についてのセンサ画像の情報であるセンサ情報と、カメラ画像の情報である画像情報と、を関連付けて記憶するものである。データベース部3は、外部機器とのインターフェース部を有し、画像情報やセンサ情報を取込んで、画像情報とセンサ情報とを組にし、複数組の情報(画像情報・センサ情報)を蓄積することができる。データベース部3は、1つ設けるものとして図1及び2に示したが、これに限らず、画像情報を記憶するものとセンサ情報を記憶するものとで区分して複数設けてもよく、センサ情報と画像情報とを関連付けて記憶可能な構成であればどのような構成であってもよい。
The
前記操作部4は、オペレータ等が検索対象の画像を選択操作するものであり、その選択操作に基づき選択情報を処理部52に出力する。
The
前記検索処理手段5は、オペレータ等によって選択された検索対象のカメラ画像の画像情報と関連付けられたセンサ情報を検索キー情報とし、この検索キー情報と、他のセンサ情報(すなわち、検索キー情報以外のセンサ情報)とを用いて、データベース部3に記憶された他の複数の画像情報(すなわち、検索対象以外のカメラ画像の画像情報)から、検索対象のカメラ画像と類似する類似画像を検索するものであり、例えば、図2に示すように、データベースアクセス部51と、処理部52と、類似比較部53と、を含んで構成されている。
The search processing means 5 uses, as search key information, sensor information associated with image information of a search target camera image selected by an operator or the like, and the search key information and other sensor information (that is, other than search key information) And a similar image similar to the camera image to be searched is searched from a plurality of other pieces of image information stored in the database unit 3 (that is, image information of camera images other than the search target). For example, as shown in FIG. 2, it includes a
前記データベースアクセス部51は、データベース部3へアクセスし、データベース部3に記憶されている画像情報及びセンサ情報を読込むものである。読込まれた画像情報及びセンサ情報は、処理部52に出力される。
The
前記処理部52は、例えば、データベースアクセス部51から出力される画像情報を入力し、入力した画像情報を表示部6に出力するものである。なお、表示部6にセンサ画像を表示させたい場合は、処理部52は、センサ情報も入力して表示部6に出力するように構成してもよい。そして、処理部52は、操作部4からの選択情報に基づいて決まる検索対象のカメラ画像の画像情報と関連付けてデータベース部3に記憶されているセンサ情報を、データベースアクセス部51を介して、検索キー情報として読込み、この検索キー情報を類似比較部53に出力する。このように、本実施形態における処理部52は、表示部6の表示を制御する機能(表示制御機能)と、データベースアクセス部51と類似比較部53間や、データベースアクセス部51と操作部4間で情報を伝達する機能(情報伝達機能)を有するものである。
For example, the
前記類似比較部53は、検索キー情報とデータベース部3に記憶された他のセンサ情報とをそれぞれ比較し、検索キー情報と類似するセンサ情報を検索し、この検索したセンサ情報と関連する画像情報に基づく画像を類似画像とするように構成されている。類似比較部53は、例えば、処理部52から出力される検索キー情報を入力して一時保存し、データベース部3に記憶されている他のセンサ情報を処理部52及びデータベースアクセス部51を介して順次読込んで、読込んだセンサ情報と一時保存した検索キー情報とを順次比較して、類似率を求め予め設定する所定の類似率を満足するセンサ情報を検索する。この比較は、例えば、検索キー情報及び他のセンサ情報内の全ての種類の情報間で行う。そして、類似比較部53は、例えば、予め設定する所定の類似率を全ての種類の情報(濃淡情報及び距離情報)で満足するセンサ情報を検索した場合、そのセンサ情報と関連付けてデータベース部3に保存されている画像情報を類似画像の画像情報として、読込むように処理部52に指令するように構成されている。この読込ませた画像情報に基づき表示部6に類似画像を表示させることができる。なお、類似比較部53は、検索対象のカメラ画像と類似する類似画像が複数ある場合は、その複数の類似画像の画像情報を読込むことができる。
The
前記表示部6は、処理部52から出力される画像情報やセンサ情報に基づいて、カメラ画像やセンサ画像等を表示するものであり、一般的なディスプレイによって構成されている。このように表示部6を設けることにより、オペレータ等は、データベース部3に記憶されている画像情報に基づくカメラ画像を視覚的に確認可能にすることができ、操作部4を介して、被検索対象のカメラ画像の中から検索対象のカメラ画像を容易に選択することができる。
The
次に、以上のような構成を有する画像検索システムの画像情報登録時の動作と類似画像検索時の動作について、図4,5に基づいて説明する。 Next, the operation at the time of image information registration and the operation at the time of similar image search of the image search system having the above configuration will be described with reference to FIGS.
まず、画像情報登録時の動作について、図4に基づいて説明する。データベース部4は、撮像手段1により取得された画像情報と、センサ2により取得されたセンサ情報を取込む(STEP1及びSTEP2)。そして、データベース部3は、取込まれた画像情報とセンサ情報とを関連付け(STEP3)、データベースとして登録(記憶)する(STEP4)。データベース部3は、撮像手段1及びセンサ2に記録されている全ての画像情報及びセンサ情報の登録が完了するまで、上記STEP1〜STEP4の動作を繰り返し、画像情報とセンサ情報とを順次組にして、予め複数組の情報(画像情報・センサ情報)を蓄積する。
First, the operation at the time of image information registration will be described with reference to FIG. The
次に、類似画像検索時の動作について、図5に基づいて説明する。まず、オペレータ等の選択操作に基づいて、検索対象のカメラ画像を決定する(STEP10)。次に、処理部52は、選択された検索対象のカメラ画像の画像情報と関連付けてデータベース部3に記憶されているセンサ情報を検索キー情報として読込み、この検索キー情報を類似比較部53に出力する(STEP11)。そして、類似比較部53は、処理部52から出力される検索キー情報を入力して一時保存し、データベース部3に記憶されているセンサ情報を順次読込んで、読込んだセンサ情報と一時保存した検索キー情報とを順次比較し、予め設定した所定の類似率を満足する類似センサ情報を検索する(STEP12)。類似比較部53は、所定の類似率を満足するセンサ情報を見つけた場合、そのセンサ情報を類似センサ情報として抽出する(STEP13)。そして、処理部52は、類似比較部53によって抽出された類似センサ情報と関連付けてデータベース部3に保存されている画像情報を、検索対象のカメラ画像と類似する類似画像の画像情報として読込んで(STEP14)、読込んだ類似画像の画像情報を、例えば、表示部6に出力して類似画像を表示させる(STEP15)。
Next, the operation at the time of similar image search will be described based on FIG. First, a camera image to be searched is determined based on a selection operation by an operator or the like (STEP 10). Next, the
このように、本実施形態による画像検索システムによれば、外乱光等の撮像環境条件による影響を排除した画像を取得可能なセンサ2からのセンサ画像の情報である検索キー情報及び他のセンサ情報を用いて、類似画像を検索することができるため、撮像環境条件による影響を受けずに安定した検索精度で類似画像を検索することができる。また、センサ2からのセンサ情報は撮像手段1からの画像情報よりも情報量が少ないため、検索キー情報及び他のセンサ情報を用いて類似画像を検索することで処理すべき情報を減らすことができ、計算機リソース(例えば、検索処理手段5)への負荷を減らすことができる。このようにして、撮像環境条件による影響を受けずに、安定した検索精度で類似画像を検索することができ、かつ、計算機リソースへの負荷を減らすことが可能な画像検索システムを提供することができる。
As described above, according to the image search system according to the present embodiment, the search key information and other sensor information, which are information of the sensor image from the
次に、本発明の第2実施形態による画像検索システムについて説明する。
本発明による画像検索システムの第2実施形態の概略構成を示すブロック図は図2と同じである。但し、処理部52及び類似比較部53における処理内容は第1実施形態と異なる。本実施形態は、検索キー情報を加工処理した情報と、データベース部3に記憶された他のセンサ情報を加工処理した情報と、を比較する構成である。なお、第1実施形態と同一の構成については説明を省略し、異なる部分についてのみ説明する。
Next, an image search system according to a second embodiment of the present invention will be described.
The block diagram showing the schematic configuration of the second embodiment of the image search system according to the present invention is the same as FIG. However, the processing contents in the
本実施形態において、処理部52は、前述した表示制御機能及び情報伝達機能に加えて、検索キー情報とデータベース部3に記憶されている他のセンサ情報を加工処理する機能(加工処理機能)も備えている。処理部52は、例えば、データベース部3から検索キー情報を読込んで加工処理し加工検索キー情報として類似比較部53に出力し、また、他のセンサ情報をデータベース部3から順次読込む際にセンサ情報を加工処理して加工センサ情報として類似比較部53に順次出力する。処理部52は、例えば、検索キー情報及び他のセンサ情報の全ての種類の情報に対して加工処理を行う。処理部52は、例えば、検索キー情報及び他のセンサ情報の画素毎の情報を所定の画素数単位で平均化処理して、情報量を減じた加工検索キー情報及び加工センサ情報を生成する。具体的には、データベース部3に記憶されている各センサ情報が30×30画素毎の濃度情報及び距離情報の場合、処理部52は、3×3画素の濃度情報を平均化して3×3画素を代表する1つ濃度情報とし、同様に、3×3画素の距離情報を平均化して3×3画素を代表する1つ距離情報とすることで、全体として10×10画素の濃度情報及び距離情報を生成し、この濃淡情報及び距離情報を加工検索情報、加工センサ情報とし、情報量を減じる。加工処理は、上記のように平均化処理に限らず、画素毎の情報を間引いて、例えば、30×30画素の情報を15×15画素の情報に減じる処理であってもよい。
In this embodiment, in addition to the display control function and the information transmission function described above, the
前記類似比較部53は、例えば、処理部52により加工処理された加工検索キー情報と加工センサ情報とをそれぞれ比較し、加工検索キー情報と類似する加工センサ情報を検索し、この検索した加工センサ情報の加工処理前のセンサ情報と関連する画像情報に基づく画像を前記類似画像とするように構成されている。
For example, the
次に、以上のような構成を有する画像検索システムの類似画像検索時の動作について、図6に基づいて説明する。なお、画像情報登録時の動作については、第1実施形態(図4参照)で説明した動作と同じであるため説明を省略する。 Next, the operation at the time of similar image search of the image search system having the above configuration will be described with reference to FIG. The operation at the time of image information registration is the same as the operation described in the first embodiment (see FIG. 4), and thus the description thereof is omitted.
まず、オペレータ等の選択操作に基づいて、検索対象の画像を決定する(STEP20)。次に、処理部52は、決定された検索画像の画像情報と関連付けてデータベース部3に記憶されているセンサ情報を検索キー情報として読込み、この検索キー情報を加工処理し、この加工処理した加工検索キー情報を類似比較部53に出力する(STEP21)。そして、類似比較部53は、例えば、処理部52から出力される加工検索キー情報を入力して一時保存し、処理部52からデータベース部3に記憶されている他のセンサ情報を加工処理した加工センサ情報を順次読込み、読込んだ加工センサ情報と一時保存した加工検索キー情報とを順次比較し、予め設定した所定の類似率を満足する類似処理センサ情報を検索する(STEP22)。類似比較部53は、所定の類似率を満足する加工センサ情報を見つけた場合、その加工センサ情報を類似加工センサ情報として抽出する(STEP23)。そして、処理部52は、類似比較部53によって抽出された類似加工センサ情報の加工処理前のセンサ情報と関連付けてデータベース部3に保存されている画像情報を、検索対象のカメラ画像と類似する類似画像の情報として読込んで(STEP24)、読込んだ類似画像の情報を、例えば、表示部6に出力して類似画像を表示させる(STEP25)。
First, a search target image is determined based on a selection operation by an operator or the like (STEP 20). Next, the
このように、本実施形態による画像検索システムによれば、外乱光等の撮像環境条件による影響を排除した画像を取得可能なセンサ2からのセンサ画像の情報である検索キー情報及び他のセンサ情報を加工処理した加工検索キー情報及び加工センサ情報に基づいて、類似画像を検索することができるため、第1実施形態と同様に、撮像環境条件による影響を受けずに、安定した検索精度で類似画像を検索することができ、かつ、計算機リソースへの負荷を減らすことができる。
As described above, according to the image search system according to the present embodiment, the search key information and other sensor information, which are information of the sensor image from the
また、本実施形態においては、検索処理手段5(類似比較部53)における比較の演算は検索キー情報及び他のセンサ情報を加工して情報量を減じた情報間で行うため、第1実施形態よりも処理すべき情報を減らすことができ、計算機リソース(例えば、検索処理手段5)への負荷をさらに減らすことができる。 In the present embodiment, since the comparison calculation in the search processing means 5 (similarity comparison unit 53) is performed between information obtained by processing the search key information and other sensor information to reduce the information amount, the first embodiment. Thus, the information to be processed can be reduced more, and the load on the computer resource (for example, the search processing means 5) can be further reduced.
なお、本実施形態において、検索キー情報及び他のセンサ情報の加工処理は、検索処理手段5(処理部52)によって行うものとしたが、これに限らず、図示しない外部の加工処理手段等によって、予め加工処理された状態で加工センサ情報がデータベース部3に保存されているものとしてもよい。この場合、前記処理部52における検索キー情報及び他のセンサ情報を加工処理する機能は設けなくてもよい。
In this embodiment, the processing of the search key information and other sensor information is performed by the search processing means 5 (processing section 52). However, the present invention is not limited to this, and an external processing processing means (not shown) or the like is used. The processing sensor information may be stored in the
また、上記全ての実施形態において、検索処理手段5(類似比較部53)は、検索キー情報、加工検索キー情報の全ての種類の情報と、他のセンサ情報、加工センサ情報内の全ての種類の情報間で比較し、すなわち、全ての種類の情報を用いて、類似画像の検索を行うものとしたが、これに限らず、例えば、濃淡情報のみを用いたり、距離情報のみを用いて類似画像の検索を行ってもよく、複数の種類の情報のうちの少なくとも1種類の情報を用いて類似画像の検索を行えばよい。これにより、類似画像の検索の要求に応じて、情報量を効果的に減じることができる。例えば、濃淡情報だけで安定した類似画像の検索が可能である場合は、比較は濃淡情報だけで行えばよい。この場合、処理部2の加工処理は、比較に用いる種類の情報のみに行うようにするとよい。
In all the above-described embodiments, the search processing means 5 (similarity comparison unit 53) performs all types of search key information and processing search key information and all types of other sensor information and processing sensor information. In other words, similar images are searched using all types of information. However, the present invention is not limited to this. For example, only similar information is used using grayscale information or similar information using only distance information. An image search may be performed, and a similar image search may be performed using at least one type of information among a plurality of types of information. As a result, the amount of information can be effectively reduced in response to a search request for similar images. For example, when it is possible to search for a similar image that is stable only with shading information, the comparison may be performed with shading information alone. In this case, the processing of the
そして、上記全ての実施形態において、検索処理手段5は、検索対象のカメラ画像において所定の画像範囲(図3(a)参照)を設定可能にし、設定した所定の画像範囲に対応する範囲(図3(b)参照)で類似画像を検索するように構成してもよい。具体的には、検索処理手段5は、比較する対象の各情報(すなわち、第1実施形態においては、検索キー情報と他のセンサ情報、第2実施形態においては、加工検索キー情報と加工センサ情報)を設定した所定の画像範囲に対応する範囲でそれぞれ比較し、類似画像を検索するように構成する。これにより、検索処理手段5等において処理すべき情報量をさらに減らすことが可能である。
In all the above-described embodiments, the
また、上記全ての実施形態において、データベース部3に記憶させる検索キー情報及び他のセンサ情報は、濃淡情報、距離情報であるとしたが、これに限らず、濃淡情報のみでもよく、また、距離情報のみでもよい。濃淡情報のみでよい場合は、例えば、特開2006−322759号公報に記載の「光センサ」等をセンサ2として用いるとよい。
In all the above embodiments, the search key information and other sensor information stored in the
そして、上記全ての実施形態において、データベース部3は、センサ情報と画像情報との関連付けを、一組のセンサ情報と画像情報の入力(取込)毎に行うものとしたが、これに限らず、センサ画像及びカメラ画像のファイル名等の関連付けが可能な情報を用いて、全てのセンサ情報及び画像情報を入力した後一度に関連付けを行うように構成してもよい。また、データベース部3は、センサ情報と画像情報とをそれぞれ取込んだ後関連付けて記憶するものとしたが、予めセンサ情報と画像情報を関連付けた状態で取込んで記憶してもよい。
In all the above embodiments, the
また、上記全ての実施形態において、類似比較部53は、所定の類似率を満足するセンサ情報、加工センサ情報を見つけた場合、表示部6に類似画像を表示させるものとしたが、これに限らず、所定の類似率を満足するセンサ情報、加工センサ情報を検索した場合、例えば、類似画像のファイル名等からなる検索結果情報を生成するように構成し、表示部6に類似画像のファイル名を表示して、データベース部3内のどの画像情報の画像が類似画像であるかを特定可能にしてもよい。
In all the embodiments described above, the
1・・カメラ(撮像手段)
2・・センサ
3・・データベース部(記憶手段)
5・・検索処理手段
7・・撮像領域
8・・対象物
1. Camera (imaging means)
2.
5 .... Search processing means 7 .... Imaging area 8 .... Object
Claims (7)
前記センサ情報を用いて、複数の前記撮像画像から選択された対象撮像画像と類似する類似画像を検索する検索処理手段と、
を備える画像検索システム。 The image information of the captured image of the predetermined area by the imaging means, the predetermined region due to the possible sensor acquires an image eliminated the influence of the captured image at the same time obtained much information captured image and ambient light a sensor information of a sensor image of a storage unit for associating and storing,
Search processing means for searching for a similar image similar to the target captured image selected from the plurality of captured images using the sensor information ;
Bei obtain image retrieval system.
前記検索処理手段は、前記複数の種類の情報のうちの少なくとも1種類の情報を用いて、前記類似画像の検索を行うことを特徴とする請求項1〜4のいずれか1つに記載の画像検索システム。 The sensor information stored in the storage unit includes a plurality of types of information,
The image according to any one of claims 1 to 4, wherein the search processing means searches for the similar image using at least one type of information among the plurality of types of information. Search system.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011012568A JP5602649B2 (en) | 2011-01-25 | 2011-01-25 | Image search system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011012568A JP5602649B2 (en) | 2011-01-25 | 2011-01-25 | Image search system |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2012155433A JP2012155433A (en) | 2012-08-16 |
JP2012155433A5 JP2012155433A5 (en) | 2014-09-04 |
JP5602649B2 true JP5602649B2 (en) | 2014-10-08 |
Family
ID=46837124
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011012568A Expired - Fee Related JP5602649B2 (en) | 2011-01-25 | 2011-01-25 | Image search system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5602649B2 (en) |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09293082A (en) * | 1996-04-26 | 1997-11-11 | Toshiba Corp | Device for retrieving picture and its method |
JP2000123173A (en) * | 1998-10-14 | 2000-04-28 | Ntt Data Corp | Image characteristic extracting method, similar image retrieval system and recording medium |
US6813395B1 (en) * | 1999-07-14 | 2004-11-02 | Fuji Photo Film Co., Ltd. | Image searching method and image processing method |
JP4444159B2 (en) * | 2005-05-17 | 2010-03-31 | 日本信号株式会社 | Optical communication device |
JP2008225887A (en) * | 2007-03-13 | 2008-09-25 | Toshiba Corp | Image retrieval system |
JP2008310446A (en) * | 2007-06-12 | 2008-12-25 | Panasonic Corp | Image retrieval system |
-
2011
- 2011-01-25 JP JP2011012568A patent/JP5602649B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2012155433A (en) | 2012-08-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101516001B (en) | Digital photographing apparatus, method of controlling the digital photographing apparatus, and recording medium | |
JP4815807B2 (en) | Image processing apparatus, image processing program, and electronic camera for detecting chromatic aberration of magnification from RAW data | |
JP4876065B2 (en) | Motion vector detection device, motion vector detection method, imaging device, and program | |
JP2005318554A5 (en) | ||
WO2016034022A1 (en) | Vehicle inspection method and system | |
JP4327827B2 (en) | Video recording / reproducing system and video recording / reproducing method | |
JP2012516485A (en) | Detection of objects that may have changed in an image | |
CN105208263B (en) | Image processing apparatus and its control method | |
JP2006276948A (en) | Image processing device, image processing method, image processing program, and recording medium storing image processing program | |
US8823833B2 (en) | Imager that adds visual effects to an image and records visual effects information in an image file | |
US20080181524A1 (en) | Image evaluation method, apparatus, and program | |
JP5602649B2 (en) | Image search system | |
JP6301202B2 (en) | Shooting condition setting device and shooting condition setting method | |
US10380463B2 (en) | Image processing device, setting support method, and non-transitory computer-readable media | |
JP5616743B2 (en) | Imaging apparatus and image processing method | |
CN113297889A (en) | Object information processing method and device | |
KR20200094940A (en) | Device and method for generating heat map | |
CN109660712A (en) | Select the mthods, systems and devices of the frame of video sequence | |
JP7132643B2 (en) | Acquisition Equipment, Image Production Method, and Program | |
JP5509014B2 (en) | Image processing apparatus and image processing method | |
JP5740934B2 (en) | Subject detection apparatus, subject detection method, and program | |
JP6563964B2 (en) | Video generation device, video generation method, and program | |
JP6639120B2 (en) | Image processing apparatus, image processing method, and program | |
JP2017097452A (en) | Image evaluation apparatus, image evaluation method and program | |
WO2019225255A1 (en) | Image correction device, image correction method, and image correction program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140123 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20140527 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140620 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140716 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140805 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140820 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5602649 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |