JPH1153386A - System and method for image retrieval and image retrieval program recording medium - Google Patents

System and method for image retrieval and image retrieval program recording medium

Info

Publication number
JPH1153386A
JPH1153386A JP9211631A JP21163197A JPH1153386A JP H1153386 A JPH1153386 A JP H1153386A JP 9211631 A JP9211631 A JP 9211631A JP 21163197 A JP21163197 A JP 21163197A JP H1153386 A JPH1153386 A JP H1153386A
Authority
JP
Japan
Prior art keywords
image
feature amount
search
data
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP9211631A
Other languages
Japanese (ja)
Inventor
Masato Yoshida
眞人 吉田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Omron Corp
Original Assignee
Omron Corp
Omron Tateisi Electronics Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omron Corp, Omron Tateisi Electronics Co filed Critical Omron Corp
Priority to JP9211631A priority Critical patent/JPH1153386A/en
Publication of JPH1153386A publication Critical patent/JPH1153386A/en
Pending legal-status Critical Current

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

PROBLEM TO BE SOLVED: To easily retrieve an image that is same as or similar to the image to be retrieved out of plural images and to obtain the objective and quantitative retrieval result by storing previously the feature values of plural object images having approximately the similar shapes. SOLUTION: When a user operates a photographing button on a control panel, a control part 11 turns on an illumination instrument 4 via an illumination part 15 and photographs the face photo of the user by a CCD camera, etc., via a photographing part 14. Then the part 11 extracts the measurement value of face parts such as the width, height, angles, space, etc., of eyes as the feature values. Based on these measurement value, the corresponding face parts images are selected from a face parts data base 16 and synthesized with the image data on the background, etc., which are inputted by the user. Thus, a portrait image is produced. Then the part 11 sends a seal form to an output part 19 from a store part 17 via a carrier part 18 and prints the portrait image on the seal form via the part 19.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】この発明は、対象物の特徴を
表す特徴量に基づいて複数の対象物の画像の中から検索
対象の画像と同一又は類似の画像を検索する画像検索シ
ステム、画像検索方法及び画像検索プログラム記録媒体
に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image retrieval system for retrieving an image that is the same as or similar to a retrieval target image from a plurality of target images based on a characteristic amount representing the characteristic of the target. The present invention relates to a method and an image search program recording medium.

【0002】[0002]

【従来の技術】近年、テレビや新聞等のマスメディアの
みならず、パーソナルコンピュータ等のOA機器におい
ても人物の特定等のために顔画像が多用されている。例
えば、カメラにより撮像した顔画像データ、又は、スキ
ャナ等により顔写真から読み取った顔画像データをパー
ソナルコンピュータに入力し、所定の画像処理を施した
顔画像を一部に挿入して文書等を作成する場合がある。
また、撮像した顔画像に適当な背景等を合成してシール
やスタンプを作成するような娯楽目的に用いられる場合
もある。
2. Description of the Related Art In recent years, not only mass media such as televisions and newspapers but also OA devices such as personal computers have frequently used face images for identification of persons. For example, face image data captured by a camera or face image data read from a face photograph by a scanner or the like is input to a personal computer, and a face image subjected to predetermined image processing is partially inserted to create a document or the like. May be.
In some cases, it is used for recreational purposes such as creating a seal or stamp by combining an appropriate background or the like with a captured face image.

【0003】一方、セキュリティシステムにおける人物
の認証や犯罪捜査等に用いられる処理として、検索対象
と同一の顔画像を予め複数の顔画像を記憶したデータベ
ースにおいて検索することが考えられる。このような、
顔画像の検索処理は、有名人にそっくりな人物を探す等
の娯楽目的にも用いることができる。
On the other hand, as a process used for authentication of a person or criminal investigation in a security system, it is conceivable to search for the same face image as a search target in a database storing a plurality of face images in advance. like this,
The face image search process can also be used for recreational purposes such as searching for a person who looks just like a celebrity.

【0004】[0004]

【発明が解決しようとする課題】しかしながら、従来の
顔画像を処理する装置では、複数の顔画像をデータベー
スに格納することはできても、データベースに格納した
複数の顔画像から検索対象の顔画像と同一または類似の
顔画像を検索するための効率的な手段を備えたものがな
く、このため、検索者の視認による判断によらざるを得
ず、検索処理が煩雑になるだけでなく、客観的で定量的
な判断に基づく検索ができない問題がある。
However, in a conventional apparatus for processing a face image, although a plurality of face images can be stored in a database, a face image to be searched from the plurality of face images stored in the database can be obtained. There is no efficient means for retrieving the same or similar face image as that of the original. Therefore, there is no choice but to rely on the judgment by the searcher's visual recognition, and not only does the retrieval process become complicated, There is a problem that it is not possible to perform a search based on accurate and quantitative judgment.

【0005】上記の問題は、顔画像の処理のみならず、
農作物や工業製品等のいずれかの物品を対象物とする処
理においても同様に生じる。
[0005] The above problem is caused not only in processing of a face image,
The same applies to the processing of any article such as agricultural products or industrial products.

【0006】この発明の目的は、対象物の画像から抽出
した特徴量に基づいて、複数の画像から検索対象の画像
と同一または類似の画像を容易に検索することができる
とともに、客観的かつ定量的な検索結果を得ることがで
きる画像検索システム、画像検索方法及び画像検索プロ
グラム記録媒体を提供することにある。
SUMMARY OF THE INVENTION It is an object of the present invention to be able to easily retrieve an image identical or similar to an image to be searched from a plurality of images based on a feature amount extracted from the image of the object, and to objectively and quantitatively determine the image. It is an object of the present invention to provide an image search system, an image search method, and an image search program recording medium capable of obtaining a basic search result.

【0007】[0007]

【課題を解決するための手段】請求項1、8及び15に
記載した発明は、概ね類似した形状を持つ複数の対象物
の画像の特徴量を特徴量記憶部に記憶し、検索対象の画
像の特徴量に基づいて検索対象の画像と同一又は類似で
あると判定できる画像を特徴量記憶部において検索する
ことを特徴とする。
According to the first, eighth and fifteenth aspects of the present invention, the feature amounts of a plurality of objects having substantially similar shapes are stored in a feature amount storage unit, and the search target image is stored. An image which can be determined to be the same as or similar to the image to be searched based on the feature amount of (i) is searched in the feature amount storage unit.

【0008】請求項1、8及び15に記載した発明にお
いては、検索対象の画像と特徴量が同一又は類似の画像
が、特徴量記憶部に記憶された複数の画像の中から検索
される。したがって、寸法や角度等の対象物の画像の特
徴量を基準として画像の同一性及び類似性が客観的かつ
定量的に判断される。
In the inventions described in claims 1, 8 and 15, an image having the same or similar feature as the image to be searched is searched from among the plurality of images stored in the feature storage. Therefore, the identity and similarity of the images are objectively and quantitatively determined based on the feature amounts of the image of the target object such as dimensions and angles.

【0009】請求項2、9及び16に記載した発明は、
対象物の画像の入力を受け付け、入力された対象物の画
像から特徴量を抽出し、抽出した対象物の画像の特徴量
が互いに同一又は類似の画像を前記特徴量記憶部におい
て検索することを特徴とする。
[0009] The invention described in claims 2, 9 and 16 is:
Receiving an input of an image of the target object, extracting a feature amount from the input image of the target object, and searching the feature amount storage unit for an image having the same or similar feature amount of the extracted image of the target object. Features.

【0010】請求項2,9及び16に記載した発明にお
いては、入力された対象物の画像から特徴量が抽出さ
れ、抽出された特徴量と同一又は類似の画像が特徴量記
憶部において検索される。したがって、入力された対象
物の画像と特徴量記憶部に予め記憶された既知の画像と
の同一性及び類似性が客観的かつ定量的に判断される。
請求項3、10及び17に記載した発明は、対象物の画
像の画像の入力を受け付け、入力された対象物の画像か
ら特徴量を抽出し、抽出した対象物の画像の特徴量を前
記特徴量記憶部に記憶するとともに、予め設定された基
準画像の特徴量と同一又は類似の特徴量の画像を前記特
徴量記憶部において検索することを特徴とする。
According to the second, ninth and sixteenth aspects, a feature amount is extracted from the input image of the object, and an image identical or similar to the extracted feature amount is searched in the feature amount storage unit. You. Therefore, the identity and similarity between the input image of the target object and the known image stored in advance in the feature amount storage unit are objectively and quantitatively determined.
The invention according to Claims 3, 10 and 17 receives an image of an image of a target object, extracts a characteristic amount from the input image of the target object, and calculates a characteristic amount of the extracted image of the target object. The image processing apparatus is characterized in that an image having the same or similar feature amount as a preset feature amount of the reference image is retrieved from the feature amount storage unit while being stored in the amount storage unit.

【0011】請求項3、10及び17に記載した発明に
おいては、入力された対象物の画像から抽出された特徴
量が特徴量記憶部に記憶され、予め設定された基準画像
と同一又は類似の特徴量の画像が特徴量記憶部において
検索される。したがって、入力された複数の対象物の画
像について基準画像との同一性及び類似性が客観的かつ
定量的に判断される。
According to the third, tenth, and seventeenth aspects of the present invention, the feature amount extracted from the input image of the object is stored in the feature amount storage unit, and is the same as or similar to the preset reference image. An image of the feature amount is searched in the feature amount storage unit. Therefore, the identity and similarity of the input plurality of target images with the reference image are objectively and quantitatively determined.

【0012】請求項4、11及び18に記載した発明
は、対象物の画像の特徴量を記憶するとともに予め設定
された基準画像の特徴量と同一又は類似の特徴量の画像
を検索するサーバと、それぞれが対象物の画像の画像の
入力を受け付けるとともに入力された対象物の画像から
特徴量を抽出する複数の端末装置と、の間で特徴量デー
タ及び検索データの送受信を行うことを特徴とする。
According to a fourth aspect of the present invention, there is provided a server for storing a feature amount of an image of an object and retrieving an image having the same or similar feature amount as a preset feature amount of a reference image. Transmitting and receiving feature amount data and search data between a plurality of terminal devices each receiving an image of the image of the object and extracting a feature amount from the input image of the object. I do.

【0013】請求項4、11及び18に記載した発明に
おいては、複数の端末装置から多数の対象物の画像が入
力される。したがって、既知の画像又は基準画像と同一
又は類似の画像の検索における的中率が向上する。
[0013] In the inventions described in claims 4, 11 and 18, images of a large number of objects are input from a plurality of terminal devices. Accordingly, the hit rate in searching for an image that is the same as or similar to the known image or the reference image is improved.

【0014】請求項5、12及び19に記載した発明
は、前記特徴量が、対象物の画像の各構成部分のそれぞ
れについて個別に抽出した特徴量の組合せであることを
特徴とする。
The invention described in claims 5, 12 and 19 is characterized in that the feature amount is a combination of feature amounts individually extracted for each component of the image of the object.

【0015】請求項5、12及び19に記載した発明に
おいては、対象物の構成部分のそれぞれについて個別に
抽出した寸法や角度等の特徴量の組合せに基づいて画像
の同一又は類似が判断される。したがって、対象物の画
像の同一性及び類似性が、対象物の構成部分のそれぞれ
についての同一性及び類似性の判断結果の総和として判
断され、判断結果の精度が向上する。
[0015] In the inventions described in claims 5, 12 and 19, the same or similar image is determined based on a combination of characteristic amounts such as dimensions and angles individually extracted for each component of the object. . Therefore, the identity and similarity of the image of the target object are determined as the sum of the determination results of the identity and similarity of each of the constituent parts of the target object, and the accuracy of the determination result is improved.

【0016】請求項6、13及び20に記載した発明
は、対象物の画像の各構成部分のそれぞれについて特徴
量にしたがって分類される複数の画像部品データを部品
記憶部に予め記憶し、対象物の画像の各構成部分の特徴
量に対応する画像部品データを部品記憶部から前記特徴
量として選択することを特徴とする。
According to a sixth aspect of the present invention, a plurality of image component data classified according to the characteristic amount for each component of the image of the object are stored in the component storage unit in advance, and The image component data corresponding to the feature value of each component of the image is selected from the component storage unit as the feature value.

【0017】請求項6、13及び20に記載した発明に
おいては、対象物の構成部分のそれぞれについて個別に
抽出した寸法や角度等に対応する画像部品データが選択
され、複数の画像部品データの集合である特徴量に基づ
いて対象物の画像の同一性及び類似性が判断される。し
たがって、類型化された各構成部分の画像部品データに
基づいて対象物の画像の同一性及び類似性の判断が簡略
化される。
According to the inventions described in claims 6, 13 and 20, image component data corresponding to dimensions, angles and the like extracted individually for each of the constituent parts of the object are selected, and a set of a plurality of image component data is selected. The identity and similarity of the image of the target object are determined based on the feature amount. Therefore, the determination of the identity and similarity of the image of the target object is simplified based on the classified image component data of each component.

【0018】請求項7、14及び21に記載した発明
は、前記部品記憶部に、顔の各構成部分のそれぞれにつ
いて特徴量にしたがって分類される複数の画像部品デー
タとして似顔絵画像データを記憶することを特徴とす
る。
According to a seventh aspect of the present invention, in the part storage section, portrait image data is stored as a plurality of image part data classified for each of the constituent parts of the face according to the characteristic amount. It is characterized by.

【0019】請求項7、14及び21に記載した発明に
おいては、輪郭、目、鼻及び口等の顔の構成部分のそれ
ぞれについて個別に抽出した寸法や角度等に対応する似
顔絵の顔部品データが選択され、複数の顔部品データの
集合である似顔絵画像に基づいて顔画像の同一性及び類
似性が判断される。したがって、顔画像の同一性及び類
似性の判断における娯楽性が向上する。
According to the invention described in claims 7, 14 and 21, the face part data of the portrait corresponding to the dimensions and angles individually extracted for each of the face components such as the contour, eyes, nose and mouth are provided. The identity and similarity of the face images are determined based on the selected portrait image, which is a set of face part data. Therefore, the entertaining property in determining the identity and similarity of the face images is improved.

【0020】[0020]

【発明の実施の形態】以下にこの発明の実施形態を、利
用者の顔画像の似顔絵を印刷したシールを作成する似顔
絵作成装置に適用した場合を例にあげて説明する。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS An embodiment of the present invention will be described below with reference to an example in which the present invention is applied to a portrait creating apparatus for creating a sticker on which a portrait of a user's face image is printed.

【0021】図1は、この発明の実施形態に係る顔画像
検索システム、顔画像検索方法及び顔画像検索プログラ
ム記憶媒体の実施形態を適用した似顔絵作成装置の外観
図である。似顔絵作成装置1は、筐体2の正面の上部に
窓部3が形成されており、この窓部3の左右に蛍光灯等
の照明器具4が配置されている。筐体2の正面におい
て、窓部3の下方には、略水平方向に操作パネル5が備
えられている。この操作パネル5には、押しボタン5a
やレバー5bが設けられている。筐体2の正面において
操作パネル5の下方には、コイン処理部6のコイン投入
口6a及びコイン返却口6bが露出しており、さらにそ
の下方には、取出口7が形成されている。図2は、上記
似顔絵作成装置1の構成を示すブロック図である。似顔
絵作成装置1は、マイクロコンピュータ等により構成し
た制御部11に、コイン処理部6、操作部12、表示部
13、撮像部14、照明部15、顔部品データベース1
6、格納部17、搬送部18、出力部19及び通信部2
0等の入出力機器を接続して構成されている。制御部1
1は、メモリに予め書き込まれたプログラム、又は、C
DROM等の記憶媒体により供給されたプログラムにし
たがって入出力機器を統括制御する。コイン処理部6
は、コイン投入口6aにおいて利用者によるコインの投
入を受け付け、投入されたコインの金種判別、真贋判別
及び釣銭計算等の処理を行い、釣銭等をコイン返却口6
bにおいて返却する。
FIG. 1 is an external view of a portrait creating apparatus to which an embodiment of a face image search system, a face image search method and a face image search program storage medium according to an embodiment of the present invention is applied. In the portrait creating apparatus 1, a window 3 is formed in the upper part of the front of the housing 2, and lighting devices 4 such as fluorescent lamps are arranged on the left and right of the window 3. An operation panel 5 is provided substantially horizontally below the window 3 on the front of the housing 2. The operation panel 5 includes a push button 5a.
And a lever 5b. A coin insertion slot 6a and a coin return slot 6b of the coin processing unit 6 are exposed below the operation panel 5 on the front of the housing 2, and an outlet 7 is formed further below the coin insertion slot 6a. FIG. 2 is a block diagram showing a configuration of the portrait creating apparatus 1. The portrait creation device 1 includes a control unit 11 configured by a microcomputer or the like, a coin processing unit 6, an operation unit 12, a display unit 13, an imaging unit 14, an illumination unit 15, a face part database 1
6, storage unit 17, transport unit 18, output unit 19, and communication unit 2
0 and the like. Control unit 1
1 is a program previously written in the memory or C
The input / output devices are generally controlled according to a program supplied from a storage medium such as a DROM. Coin processing unit 6
Accepts the insertion of a coin by the user at the coin insertion slot 6a, performs processing of discrimination of the inserted coin, identification of authenticity, calculation of change, and the like.
Return at b.

【0022】操作部12は、ユーザによる操作パネル5
に配置した押しボタン5aやレバー5bの操作によるシ
ール等の作成のための設定データの入力を受け付ける。
表示部13は、窓部3を介して筐体2の正面に露出する
CRT等のディスプレイを介して、シール等の作成作業
に係る操作方法や作業の進捗状況をユーザに表示する。
撮像部14は、CCDカメラ等により構成されており、
ユーザの顔画像を窓部3を介して撮像する。照明部15
は、撮像部14による顔画像の撮像時に、窓部3の左右
に配置された照明器具4を点灯してユーザの顔を照明す
る。
The operation unit 12 is provided with an operation panel 5 by a user.
The input of setting data for creating a seal or the like by operating the push button 5a or the lever 5b arranged on the device is received.
The display unit 13 displays, to the user, an operation method related to a creation operation of a seal or the like and a progress status of the operation via a display such as a CRT exposed to the front of the housing 2 through the window unit 3.
The imaging unit 14 is configured by a CCD camera or the like,
A face image of the user is captured through the window 3. Lighting unit 15
When the imaging unit 14 captures a face image, the lighting unit 4 arranged on the left and right of the window 3 is turned on to illuminate the user's face.

【0023】顔部品データベース16は、図3に示すよ
うに、目、鼻、口、眉、耳、輪郭及び髪の顔部品毎に似
顔絵画像を作成するための複数の顔部品画像を格納して
いる。より詳細には、顔部品データベース16は、各顔
部品について顔画像から抽出された、例えば、目の幅、
高さ、角度及び間隔等の測定値に基づいて、各顔部品の
大きさや形状の変化を複数の段階に分割した際のそれぞ
れの段階に対応する顔部品画像を記憶している。各顔部
品画像にはそれぞれ個別の顔部品コードが付与されてお
り、この顔部品コードにより各顔部品画像を特定するこ
とができる。
As shown in FIG. 3, the face part database 16 stores a plurality of face part images for creating a portrait image for each face part of eyes, nose, mouth, eyebrows, ears, contours, and hair. I have. More specifically, the face part database 16 stores, for example, the width of the eyes,
Based on measured values such as height, angle, and interval, a face part image corresponding to each stage when a change in the size or shape of each facial part is divided into a plurality of stages is stored. Each face part image is assigned an individual face part code, and each face part image can be specified by this face part code.

【0024】なお、顔部品データベース16を複数種の
画像タイプ毎、及び、複数種の表情毎に設けておくこと
により、いずれかの画像タイプ及び表情を選択して似顔
絵画像を作成できるようにしてもよい。
By providing the face part database 16 for each of a plurality of image types and for each of a plurality of facial expressions, any one of the image types and facial expressions can be selected to create a portrait image. Is also good.

【0025】格納部17は、シール用紙を格納してい
る。搬送部18は、格納部17に格納されているシール
用紙を出力部19を経由して取出口7に搬送する。出力
部19は、搬送部18により搬送されたシール用紙に顔
画像の似顔絵を印刷する。なお、似顔絵作成装置1が、
ユーザの顔画像の似顔絵のスタンプを作成するものであ
ってもよい。この場合には、格納部17にスタンプ材料
を格納しておき、搬送部18により搬送されたスタンプ
材料に対して出力部19において焼き付け等の処理を行
う。通信部20は、制御部11と後述するサーバとの間
におけるデータの送受信を行う。
The storage section 17 stores sticker sheets. The transport unit 18 transports the sticker sheet stored in the storage unit 17 to the outlet 7 via the output unit 19. The output unit 19 prints a portrait of the face image on the sticker paper transported by the transport unit 18. In addition, the portrait creating apparatus 1
A stamp of a portrait of a user's face image may be created. In this case, the stamp material is stored in the storage unit 17, and a process such as printing is performed on the stamp material transported by the transport unit 18 in the output unit 19. The communication unit 20 transmits and receives data between the control unit 11 and a server described later.

【0026】図4は、上記似顔絵作成装置を含む顔画像
検索システムの構成を示す図である。顔画像検索システ
ム31は、サーバ32に複数の似顔絵作成装置1を接続
して構成されている。各似顔絵作成装置1は、専用線又
は公衆電話回線網等のデータ通信ラインを介して接続さ
れている。サーバ32は、データベース41、登録エン
ジン42a及び検索エンジン42bを含む制御部42、
並びに、通信部43によって構成されている。制御部4
2の登録エンジン42aはデータベース41に対するデ
ータの書込処理を行い、検索エンジン42bはデータベ
ース41におけるデータの検索処理を行う。
FIG. 4 is a diagram showing a configuration of a face image search system including the portrait drawing apparatus. The face image search system 31 is configured by connecting a plurality of portrait creating apparatuses 1 to a server 32. Each portrait creation device 1 is connected via a data communication line such as a dedicated line or a public telephone line network. The server 32 includes a control unit 42 including a database 41, a registration engine 42a, and a search engine 42b,
And a communication unit 43. Control unit 4
The second registration engine 42a performs a process of writing data to the database 41, and the search engine 42b performs a process of searching data in the database 41.

【0027】データベース41は、一例として、図5〜
図8に示す登録ユーザデータベース52、第1の基準顔
画像データベース53、第2の基準顔画像データベース
54及び同一顔画像データベース55によって構成され
ている。図5に示す登録ユーザデータベース52は、ユ
ーザが各似顔絵作成装置1において似顔絵を作成したユ
ーザ毎に、ユーザを特定するユーザコード52a及び名
前52b、似顔絵作成装置1の撮像部14により撮像し
た顔画像データを特定する顔画像データコード52c、
自己の顔画像データを他人に公開することを許可するか
否かを表す許可データ52d、顔画像データに基づいて
選択した顔部品画像を特定する顔部品コード52e、並
びに、年齢や性別等のユーザ毎の個人情報52fを記憶
する。
The database 41 is, for example, shown in FIGS.
It is composed of a registered user database 52, a first reference face image database 53, a second reference face image database 54, and a same face image database 55 shown in FIG. The registered user database 52 shown in FIG. 5 includes a user code 52a and a name 52b for specifying the user, and a face image captured by the imaging unit 14 of the portrait creation device 1 for each user who creates a portrait in each portrait creation device 1. A face image data code 52c for specifying data,
Permission data 52d indicating whether to permit the disclosure of own face image data to others, a face part code 52e for specifying a face part image selected based on the face image data, and a user such as age and gender. Each personal information 52f is stored.

【0028】このデータベース52を構成するため、似
顔絵作成装置1は、後述するように、ユーザによる似顔
絵の作成処理が終了後、又は、作成処理中において、名
前52b、許可データ52d及び個人情報52f等のユ
ーザによる入力操作を受け付ける。
In order to configure the database 52, the portrait creating apparatus 1 performs processing such as the name 52b, the permission data 52d, the personal information 52f, and the like after the creation of the portrait by the user or during the creation as described later. Of user input operations.

【0029】図6に示す第1の基準顔画像データベース
53は、予め定めた美人顔に該当するユーザを検索する
ために、美人顔を構成する顔部品画像の組合せを記憶す
る。即ち、データベース53は、複数の美人顔のそれぞ
れについて、各美人顔を特定するための美人顔コード5
3a、各顔部品において選択すべき顔部品画像の顔部品
コード53b、美人顔のイメージ画像データを特定する
ための顔画像データコード53c、及び、美人顔に該当
する登録ユーザのユーザコード53dを記憶する。
The first reference face image database 53 shown in FIG. 6 stores combinations of face part images constituting a beautiful face in order to search for a user corresponding to a predetermined beautiful face. That is, the database 53 stores, for each of the plurality of beautiful faces, a beautiful face code 5 for identifying each beautiful face.
3a, a face part code 53b of a face part image to be selected in each face part, a face image data code 53c for specifying image data of a beautiful face, and a user code 53d of a registered user corresponding to a beautiful face are stored. I do.

【0030】図7に示す第2の基準顔画像データベース
54は、有名人に似たユーザを検索するために、有名人
の顔画像について似顔絵を作成する際の顔部品画像の組
合せを記憶する。即ち、データベース54は、複数の有
名人のそれぞれについて、有名人を特定するための有名
人の名前及びコード54a、各顔部品において選択すべ
き顔部品画像の顔部品コード54b、有名人の顔画像デ
ータを特定するための顔画像データコード54c、並び
に、有名人の顔部品コード54bと同一の組合せに係る
顔部品コードを有する登録ユーザのユーザコード54d
を記憶する。
The second reference face image database 54 shown in FIG. 7 stores a combination of face part images when creating a portrait of a celebrity face image in order to search for a user similar to a celebrity. That is, the database 54 specifies, for each of the plurality of celebrities, the name and code 54a of the celebrity for specifying the celebrity, the face part code 54b of the face part image to be selected in each face part, and the face image data of the celebrity. Image data code 54c for registration and a user code 54d of a registered user having a face part code according to the same combination as the celebrity face part code 54b
Is stored.

【0031】なお、全ての顔部品について有名人の顔部
品コードに完全に一致する場合のみならず、全ての顔部
品について有名人の顔部品コードに近似する登録ユーザ
のユーザコード、及び、一部の顔部品について有名人の
顔部品コードに一致するとともに他の顔部品について同
じ有名人の顔部品コードに近似する登録ユーザのユーザ
コードをも記憶するようにしてもよい。
It should be noted that not only the case where all face parts completely match the celebrity face part code, but also the registered user's user code which approximates the celebrity face part code for all face parts, and some face parts The user code of the registered user that matches the celebrity face part code for the part and approximates the same celebrity face part code for other face parts may also be stored.

【0032】図8に示す同一顔画像データベース55
は、互いに似た顔画像の登録ユーザを検索するために、
顔部品画像の組合せのそれぞれについて該当する登録ユ
ーザコードを記憶する。即ち、データベース55は、顔
部品コードの組み合わせ55aと、顔部品コードの組合
せが各組合せに一致する登録ユーザのユーザコード55
bとを記憶する。
The same face image database 55 shown in FIG.
Searches for registered users with similar face images,
A corresponding registered user code is stored for each combination of face part images. That is, the database 55 stores the combination 55a of the face part code and the user code 55 of the registered user whose combination of the face part code matches each combination.
b is stored.

【0033】なお、全ての顔部品について他人の顔部品
コードに完全に一致する場合のみならず、全ての顔部品
について他人の顔部品コードに近似する登録ユーザのユ
ーザコード、及び、一部の顔部品について他人の顔部品
コードに一致するとともに他の顔部品についてその他人
の顔部品コードに近似する登録ユーザのユーザコードを
も記憶するようにしてもよい。
It should be noted that not only a case where all face parts completely match the face part code of another person, but also a user code of a registered user who is similar to the face part code of another person for all face parts, and some face parts The user code of the registered user that matches the face part code of another person with respect to the part and may be similar to the face part code of the other person with respect to other face parts may be stored.

【0034】但し、データベース55は必須ではなく、
図5に示した登録ユーザのデータベース52を参照して
互いに似た顔画像の登録ユーザを検索することにより、
データベース55を不要にしてデータベース51の容量
を削減するようにしてもよい。
However, the database 55 is not essential,
By searching for registered face images similar to each other with reference to the registered user database 52 shown in FIG. 5,
The capacity of the database 51 may be reduced by making the database 55 unnecessary.

【0035】図9は、上記似顔絵作成装置の制御部の処
理手順を示すフローチャートである。似顔絵作成装置1
の制御部11は、電源投入後においてユーザによるコイ
ンの投入を待機し(s1)、ユーザがコインを投入する
とコイン処理部6において真贋判別、金種判別及び釣銭
処理等のコイン処理を行い(s2)、コイン処理が適正
に完了すると(s3)、ディスプレイに写真撮影を指示
する画面を表示する(s4)。ユーザが操作パネル5に
おいて撮影ボタンを操作すると(s5)、制御部11は
照明部15を介して照明器具4を点灯し、撮像部14を
介してCCDカメラ等によりユーザの顔画像を撮像する
(s6)。
FIG. 9 is a flowchart showing a processing procedure of the control unit of the portrait drawing apparatus. Portrait drawing device 1
After the power is turned on, the control unit 11 waits for a user to insert a coin (s1). When the user inserts a coin, the coin processing unit 6 performs coin processing such as authenticity discrimination, denomination discrimination, and change processing (s2). ), When the coin processing is properly completed (s3), a screen for instructing photography is displayed on the display (s4). When the user operates the shooting button on the operation panel 5 (s5), the control unit 11 turns on the lighting device 4 via the lighting unit 15, and captures a face image of the user using a CCD camera or the like via the imaging unit 14 ( s6).

【0036】次いで、制御部11は、表示部13を介し
てディスプレイに画像用データの入力を指示する画面を
表示し(s7)、ユーザの操作パネル5における似顔絵
のタイプ、表情及び背景等の画像用データの入力操作を
受け付ける(s8)。この画像用データには、選択的に
入力される眼鏡の形状や位置及び文字が含まれる。この
後、制御部11は、ユーザによる設定完了の入力操作を
待って似顔絵画像を作成する(s9,s10)。
Next, the control unit 11 displays a screen for instructing input of image data on the display via the display unit 13 (s7), and displays images of the portrait, expression, background, etc. of the portrait on the operation panel 5 of the user. The input operation of the application data is received (s8). The image data includes the shape, position, and characters of the glasses that are selectively input. After that, the control unit 11 creates a portrait image after waiting for an input operation of the setting completion by the user (s9, s10).

【0037】この似顔絵画像の作成処理では、制御部1
1は、撮像したユーザの顔画像から、各顔部品につい
て、例えば、目の幅、高さ、角度及び間隔等の測定値を
特徴量として抽出し、この測定値に基づいて該当する顔
部品画像を顔部品データベース16から選択し、ユーザ
が入力した背景等の画像用データを合成して似顔絵画像
を作成する。この後、制御部11は、搬送部18を介し
てシール用紙を格納部17から出力部19に搬送し、出
力部19を介してシール用紙に似顔絵画像を印刷する。
In the process of creating a portrait image, the control unit 1
1 extracts, for each face part, measured values such as eye width, height, angle, and interval as feature amounts from the captured face image of the user and extracts a corresponding face part image based on the measured values. Is selected from the facial part database 16 and the image data such as the background input by the user is synthesized to create a portrait image. Thereafter, the control unit 11 transports the sticker sheet from the storage unit 17 to the output unit 19 via the transport unit 18, and prints a portrait image on the seal sheet via the output unit 19.

【0038】この似顔絵画像の作成処理中、又は、作成
処理後において、制御部11は、ユーザによるデータの
登録処理、及び、各種検索処理を実行するか否かの選択
を受け付ける(s11,s12)。ユーザがデータの登
録処理の実行を選択した場合には、制御部11は、表示
部13を介してディスプレイに登録データの入力を指示
する画面を表示し(s13)、ユーザの名前、似顔絵画
像の公開の可否、年齢及び性別等の登録データの入力を
受け付ける。さらに、制御部11は、通信部20を介し
てサーバ32との通信を行い、登録データを顔部品画像
コードとともにサーバ32に送信する(s14)。
During or after the portrait image creation process, the control unit 11 accepts the user's selection of whether to execute the data registration process and various search processes (s11, s12). . When the user selects the execution of the data registration process, the control unit 11 displays a screen for instructing input of the registration data on the display via the display unit 13 (s13), and displays the name of the user and the portrait image. Accepts input of registration data such as disclosure availability, age and gender. Further, the control unit 11 communicates with the server 32 via the communication unit 20, and transmits the registration data to the server 32 together with the face part image code (s14).

【0039】ユーザが検索処理の実行を選択した場合に
は、制御部11は、表示部13を介してディスプレイに
検索内容の入力を指示する画面を表示し(s15)、ユ
ーザが美人顔か否か、ユーザに似た有名人がいるか否
か、又は、ユーザに似た登録ユーザがいるか否かのいず
れの検索を行うかの検索内容の選択入力を受け付ける
(s16)。ユーザが検索内容の選択入力を行うと、制
御部11は、通信部20を介してサーバ32との通信を
行い、ユーザが登録処理を完了している場合にはユーザ
コードを、ユーザが登録処理を完了していない場合には
ユーザコード及び顔部品画像コードを、サーバ32に送
信し(s17)、サーバ32から送信された検索結果を
受信すると(s18)、その検索結果を表示部13を介
してディスプレイに表示する(s19)。制御部11
は、出力部19におけるシールの印刷処理が完了する
と、搬送部18を介して似顔絵画像を印刷済みのシール
を取出口7に搬送する(s20,s21)。
When the user selects the execution of the search process, the control unit 11 displays a screen for instructing the input of the search content on the display via the display unit 13 (s15), and determines whether the user is a beautiful face. A selection input of a search content to determine whether to search for a celebrity similar to the user or a registered user similar to the user is received (s16). When the user performs a selection input of the search content, the control unit 11 communicates with the server 32 via the communication unit 20. When the user has completed the registration process, the control unit 11 transmits the user code. If the search is not completed, the user code and the face part image code are transmitted to the server 32 (s17). When the search result transmitted from the server 32 is received (s18), the search result is displayed via the display unit 13. Is displayed on the display (s19). Control unit 11
When the printing process of the sticker in the output unit 19 is completed, the sticker on which the portrait image has been printed is conveyed to the outlet 7 via the conveying unit 18 (s20, s21).

【0040】図10は、上記サーバの制御部の処理手順
を示すフローチャートである。サーバ32の制御部42
は、通信部43が似顔絵作成装置1から送信されたデー
タを受信することを待機しており(s31,s32)、
通信部43が似顔絵作成装置1から送信された登録デー
タを受信すると、制御部42内の登録エンジン42a
は、登録データを構成する各データをデータベース41
内の登録ユーザデータベース52に書き込む(s3
3)。
FIG. 10 is a flowchart showing a processing procedure of the control unit of the server. Control unit 42 of server 32
Are waiting for the communication unit 43 to receive the data transmitted from the portrait drawing apparatus 1 (s31, s32),
When the communication unit 43 receives the registration data transmitted from the portrait drawing apparatus 1, the registration engine 42a in the control unit 42
Stores the data constituting the registration data in the database 41
Is written into the registered user database 52 (s3).
3).

【0041】一方、通信部44が似顔絵作成装置1から
送信された検索データを受信すると、制御部42内の検
索エンジン42bは、検索データに含まれる検索内容を
指定するデータに基づいて、第1の基準顔画像データベ
ース53、第2の基準顔画像データベース54又は同一
顔画像データベース55のいずれかにおいて、検索デー
タに含まれる顔部品コードの組合せ、又は、検索データ
に含まれるユーザコードに基づいて登録ユーザのデータ
ベース16から読み出した顔部品コードの組合せと同一
の組合せを検索する(s34)。検索エンジン42b
は、通信部43を介してこの検索結果を似顔絵作成装置
1に送信する(s35)。サーバ32から送信された検
索結果は、上述したs18において似顔絵作成装置1に
よって受信される。
On the other hand, when the communication section 44 receives the search data transmitted from the portrait drawing apparatus 1, the search engine 42b in the control section 42 performs the first search based on the data specifying the search content included in the search data. In any one of the reference face image database 53, the second reference face image database 54, and the same face image database 55, based on a combination of face part codes included in the search data or a user code included in the search data. The same combination as the combination of the face part codes read from the user database 16 is searched (s34). Search engine 42b
Transmits the search result to the portrait creating apparatus 1 via the communication unit 43 (s35). The search result transmitted from the server 32 is received by the portrait creating apparatus 1 in s18 described above.

【0042】例えば、似顔絵作成装置1から美人顔の検
索データが送信された場合、制御部42の検索エンジン
42bは、検索データに含まれるユーザの顔部品コード
の組合せを第1の基準顔画像データベース53において
検索する。検索エンジン42bは、そのユーザの顔部品
コードの組合せが第1の基準顔画像データベース53に
記憶している美人顔の顔部品コードの組合せのいずれか
に一致する場合には、そのユーザコードを第1の基準顔
画像データベース53の対応するエリアに格納するとと
もに、そのユーザが美人顔である旨を表す検索結果を通
信部43を介して似顔絵作成装置1に送信する。
For example, when search data of a beautiful face is transmitted from the portrait drawing apparatus 1, the search engine 42b of the control unit 42 determines the combination of the user's face part codes included in the search data in the first reference face image database. Search at 53. When the combination of the face part codes of the user matches any of the combinations of the face part codes of the beautiful face stored in the first reference face image database 53, the search engine 42b extracts the user code. The search result is stored in the corresponding area of the reference face image database 53 and the search result indicating that the user is a beautiful face is transmitted to the portrait creating apparatus 1 via the communication unit 43.

【0043】また、似顔絵作成装置1から有名人の検索
データが送信された場合、制御部42の検索エンジン4
2bは、検索データに含まれるユーザの顔部品コードの
組合せを第2の基準顔画像データベース54において検
索する。そのユーザの顔部品コードの組合せが第2の基
準顔画像データベース54に記憶している有名人の顔部
品コードの組合せのいずれかに一致する場合には、検索
エンジン42bは、そのユーザコードを第2の基準顔画
像データベース54の対応するエリアに格納するととも
に、そのユーザが特定の有名人に似ている旨を表す検索
結果を通信部43を介して似顔絵作成装置1に送信す
る。
When the celebrity search data is transmitted from the portrait drawing apparatus 1, the search engine 4 of the control unit 42
2b searches the second reference face image database 54 for a combination of the user's face part codes included in the search data. If the combination of the user's face part codes matches any of the combinations of celebrity face part codes stored in the second reference face image database 54, the search engine 42b sets the user code to the second reference face image database. Is stored in the corresponding area of the reference face image database 54, and a search result indicating that the user is similar to a specific celebrity is transmitted to the portrait creating apparatus 1 via the communication unit 43.

【0044】さらに、似顔絵作成装置1からユーザに似
た他の登録ユーザの検索データが送信された場合、制御
部42の検索エンジン42bは、検索データに含まれる
ユーザの顔部品コードの組合せを同一顔画像データベー
ス55において検索し、検索データに含まれるユーザコ
ードを同一顔画像データベース55の対応するエリアに
格納する。同一顔画像データベース55に、その顔部品
コードの組合せを有する他の登録ユーザコードが存在す
る場合には、検索エンジン42bは、そのユーザに似た
他の登録ユーザの顔画像データをデータベース16から
読み出し、この顔画像データを含む検索結果を通信部4
3を介して似顔絵作成装置1に送信する。
Further, when search data of another registered user similar to the user is transmitted from the portrait drawing apparatus 1, the search engine 42b of the control unit 42 sets the combination of the face part codes of the user included in the search data to the same. A search is performed in the face image database 55, and the user code included in the search data is stored in a corresponding area of the same face image database 55. When there is another registered user code having the combination of the face part codes in the same face image database 55, the search engine 42b reads out the face image data of another registered user similar to the user from the database 16. The search result including the face image data is transmitted to the communication unit 4.
3 to the portrait drawing apparatus 1.

【0045】以上の処理により、この実施形態に係る顔
画像検索システムにおいては、ユーザの顔画像から抽出
した各顔部品の測定値に基づいて選択した顔部品画像の
組合せによって、ユーザの顔画像と同一又は類似の美人
顔や有名人等の基準画像や他の登録ユーザの顔画像を、
簡単な処理で素早く検索することができる。また、基本
的には、顔画像から抽出した各顔部品の測定値に基づい
て検索を行うため、客観的かつ定量的な検索結果を得る
ことができる。さらに、複数の似顔絵作成装置1をサー
バ32に接続して顔画像検索システムを構成しているた
め、多数のユーザ間で同一又は類似するユーザを検索す
ることができ、検索結果における的中率を向上すること
ができる。
With the above processing, in the face image retrieval system according to this embodiment, the face image of the user is combined with the face image selected based on the measured value of each face part extracted from the user's face image. Reference images of the same or similar beautiful faces, celebrities, etc. and face images of other registered users,
You can search quickly with simple processing. In addition, since the search is basically performed based on the measurement values of each face part extracted from the face image, an objective and quantitative search result can be obtained. Furthermore, since the portrait image creation system 1 is connected to the server 32 to form a face image search system, a large number of users can search for the same or similar users, and the hit rate in the search results can be reduced. Can be improved.

【0046】なお、サーバ32のデータベース41及び
制御部42を似顔絵作成装置1内に設けることにより、
検索対象となるユーザ数は減少するが、サーバ32との
間の通信時間を不要にして処理時間を短縮することがで
きる。
By providing the database 41 and the control unit 42 of the server 32 in the portrait creating apparatus 1,
Although the number of users to be searched decreases, the processing time can be shortened by eliminating the communication time with the server 32.

【0047】また、顔部品データベース16をサーバ3
2に備えることにより、各似顔絵作成装置1の構成を簡
略化するようにしてもよい。この場合には、各似顔絵作
成装置1において撮像したユーザの顔画像データをサー
バ32に送信し、サーバ32において選択した顔部品画
像データを各似顔絵作成装置1に送信する。
The face part database 16 is stored in the server 3
2, the configuration of each portrait creating apparatus 1 may be simplified. In this case, the face image data of the user captured by each portrait creating apparatus 1 is transmitted to the server 32, and the face part image data selected by the server 32 is transmitted to each portrait creating apparatus 1.

【0048】さらに、データベース53〜55において
顔部品コードに代えて各顔部品から抽出した測定値を特
徴量として記憶しておき、ユーザの顔画像から抽出した
各顔部品の測定値に基づいて検索を行うことにより、よ
り詳細な検索結果を得るようにしてもよい。
Further, in the databases 53 to 55, measured values extracted from the respective face parts are stored as feature amounts instead of the face part codes, and retrieval is performed based on the measured values of the respective face parts extracted from the user's face image. , A more detailed search result may be obtained.

【0049】加えて、上記の実施形態では、美人顔、有
名人及び他の登録ユーザとの同一又は類似を検索内容と
したが、サーバ32のデータベース41内に検索内容に
応じたデータベースを備えることにより、他の検索内容
について検索処理を行うこともできる。
In addition, in the above embodiment, the search content is the same or similar to a beautiful face, a celebrity, or another registered user. However, the database 41 of the server 32 is provided with a database corresponding to the search content. Alternatively, a search process can be performed for other search contents.

【0050】また、似顔絵作成装置1における検索結果
の利用態様としては、ディスプレイにおける表示に限定
されるものではなく、例えば、検索結果に応じた画像を
合成した似顔絵画像を作成し、この作成結果をユーザの
選択に応じて出力するようにしてもよい。
The mode of using the search result in the portrait creating apparatus 1 is not limited to the display on the display. For example, a portrait image in which an image corresponding to the search result is synthesized is created, and the created result is displayed. You may make it output according to a user's selection.

【0051】なお、この発明は、顔画像の検索にのみ適
用されるものではなく、農作物や工業製品等において1
又は2以上の特徴量を抽出することができる物品の検索
処理に用いることができる。例えば、全体の大きさ及び
色等を特徴量として収穫された農作物の中から特定種類
の作物を検索する場合、全体の大きさ、色、目の大きさ
及び目の位置等を特徴量として水揚げされた多数種類の
魚の中から特定種類の魚を検索する場合、並びに、軸間
距離、全長及び全高等を特徴量として走行中の車両から
特定の車種を検索する場合等にも、この発明を適用する
ことができる。
It should be noted that the present invention is not applied only to face image retrieval, but is applied to crops and industrial products.
Alternatively, it can be used for a search process for an article from which two or more feature values can be extracted. For example, when searching for a specific type of crop from among the harvested crops using the overall size and color etc. as features, the overall size, color, size of eyes and eye position etc. are landed as features. The present invention is also applicable to a case of searching for a specific type of fish from among a large number of types of fish that have been performed, and a case of searching for a specific type of vehicle from a running vehicle using the axial distance, the total length, the total height, and the like as features. Can be applied.

【0052】[0052]

【発明の効果】請求項1、8及び15に記載した発明に
よれば、検索対象の画像と特徴量が同一又は類似の画像
を、特徴量記憶部に記憶された複数の画像の中から検索
することにより、寸法や角度等の対象物の画像の特徴量
を基準として画像の同一性及び類似性を客観的かつ定量
的に判断することができる。
According to the first, eighth, and fifteenth aspects of the present invention, an image having the same or similar feature as an image to be searched is searched from a plurality of images stored in a feature storage unit. By doing so, it is possible to objectively and quantitatively determine the identity and similarity of the images based on the feature amounts of the image of the target object such as dimensions and angles.

【0053】請求項2,9及び16に記載した発明によ
れば、入力された対象物の画像から特徴量を抽出し、抽
出した特徴量と同一又は類似の特徴量を有する画像を特
徴量記憶部において検索することにより、入力された画
像と特徴量記憶部に予め記憶された既知の画像との同一
性及び類似性を客観的かつ定量的に判断することができ
る。
According to the second, ninth and sixteenth aspects of the present invention, a feature amount is extracted from the input image of the object, and an image having the same or similar feature amount as the extracted feature amount is stored in the feature amount. By performing a search in the section, it is possible to objectively and quantitatively determine the identity and similarity between the input image and a known image stored in advance in the feature amount storage section.

【0054】請求項3、10及び17に記載した発明に
よれば、入力された対象物の画像から抽出した特徴量を
特徴量記憶部に記憶し、予め設定された基準画像と同一
又は類似の画像を特徴量記憶部において検索することに
より、入力された複数の対象物の画像について基準画像
との同一性及び類似性を客観的かつ定量的に判断するこ
とができる。
According to the third, tenth, and seventeenth aspects, the feature amount extracted from the input image of the object is stored in the feature amount storage unit, and is the same as or similar to the preset reference image. By retrieving images in the feature storage unit, it is possible to objectively and quantitatively determine the identity and similarity of the input plurality of target images with the reference image.

【0055】請求項4、11及び18に記載した発明に
よれば、複数の端末装置から多数の対象物の画像の入力
を受け付けることにより、既知の画像又は基準画像と同
一又は類似の画像の検索における的中率を向上すること
ができる。
According to the fourth, eleventh and eighteenth aspects of the present invention, by receiving input of a large number of objects from a plurality of terminal devices, a search for a known image or an image identical to or similar to a reference image is performed. The hit rate in the above can be improved.

【0056】請求項5、12及び19に記載した発明に
よれば、対象物の画像の構成部分のそれぞれについて個
別に抽出した寸法や角度等の特徴量の組合せに基づいて
画像の同一又は類似を判断することにより、画像の同一
性及び類似性を、対象物の画像における構成部分のそれ
ぞれについての同一性及び類似性の判断結果の総和とし
て判断することができ、判断結果の精度を向上すること
ができる。
According to the fifth, twelfth, and nineteenth aspects of the present invention, the same or similar image is determined based on a combination of characteristic amounts such as dimensions and angles individually extracted for each component of the image of the object. By making the determination, the identity and similarity of the images can be determined as the sum of the determination results of the identity and similarity of each of the constituent parts in the image of the object, and the accuracy of the determination results is improved. Can be.

【0057】請求項6、13及び20に記載した発明に
よれば、対象物の画像の構成部分のそれぞれについて個
別に抽出した寸法や角度等に対応する画像部品データを
選択し、複数の画像部品データの集合を特徴量として画
像の同一性及び類似性を判断することにより、類型化さ
れた各構成部分の画像部品データに基づいて画像の同一
性及び類似性の判断を簡略化することができる。
According to the sixth, thirteenth, and twentieth aspects of the present invention, image component data corresponding to dimensions, angles, and the like individually extracted for each of the constituent parts of the image of the object are selected, and a plurality of image components are selected. By judging the identity and similarity of images using a set of data as a feature amount, it is possible to simplify the determination of the identity and similarity of images based on the classified image component data of each component. .

【0058】請求項7、14及び21に記載した発明に
よれば、輪郭、目、鼻及び口等の顔の構成部分のそれぞ
れについて個別に抽出した寸法や角度等に対応する似顔
絵の顔部品データを選択し、複数の顔部品データの集合
である似顔絵画像に基づいて顔画像の同一性及び類似性
を判断することにより、顔画像の同一性及び類似性の判
断における娯楽性を向上させることができる。
According to the seventh, fourteenth, and twenty-first aspects of the present invention, face part data of a portrait corresponding to dimensions, angles, and the like individually extracted for face constituent parts such as contours, eyes, nose, and mouth. And determining the sameness and similarity of the face images based on the portrait image which is a set of a plurality of pieces of face part data, thereby improving the entertainment in the determination of the sameness and similarity of the face images. it can.

【図面の簡単な説明】[Brief description of the drawings]

【図1】この発明の実施形態に係る顔画像検索システ
ム、顔画像検索方法及び顔画像検索プログラム記憶媒体
の実施形態を適用した似顔絵作成装置の外観図である。
FIG. 1 is an external view of a caricature creation apparatus to which a face image search system, a face image search method, and a face image search program storage medium according to an embodiment of the present invention are applied.

【図2】上記似顔絵作成装置の構成を示すブロック図で
ある。
FIG. 2 is a block diagram showing a configuration of the portrait drawing apparatus.

【図3】上記似顔絵作成装置が有するデータベースの記
憶内容を示す図である。
FIG. 3 is a diagram showing storage contents of a database of the portrait creating apparatus.

【図4】上記似顔絵作成装置を含む顔画像検索システム
の構成を示す図である。
FIG. 4 is a diagram showing a configuration of a face image search system including the portrait creating apparatus.

【図5】上記顔画像検索システムを構成するサーバが有
する登録ユーザのデータベースの記憶内容を示す図であ
る。
FIG. 5 is a diagram showing storage contents of a database of registered users possessed by a server constituting the face image search system.

【図6】同サーバが有する第1の基準顔画像データベー
スの記憶内容を示す図である。
FIG. 6 is a diagram showing storage contents of a first reference face image database of the server.

【図7】同サーバが有する第2の基準顔画像データベー
スの記憶内容を示す図である。
FIG. 7 is a diagram showing storage contents of a second reference face image database of the server.

【図8】同サーバが有する同一顔画像データベースの記
憶内容を示す図である。
FIG. 8 is a diagram showing storage contents of a same face image database of the same server.

【図9】上記似顔絵作成装置の制御部の処理手順を示す
フローチャートである。
FIG. 9 is a flowchart showing a processing procedure of a control unit of the portrait creating apparatus.

【図10】上記サーバの制御部の処理手順を示すフロー
チャートである。
FIG. 10 is a flowchart showing a processing procedure of a control unit of the server.

【符号の説明】[Explanation of symbols]

1−似顔絵作成装置 11−制御部 14−撮像部 16−顔部品データベース 31−顔画像検索システム 32−サーバ 42−制御部 42a−登録エンジン 42b−検索エンジン 52−登録ユーザデータベース 53−第1の基準顔画像データベース 54−第2の基準顔画像データベース 55−同一顔画像データベース 1-caricature creation device 11-control unit 14-imaging unit 16-face part database 31-face image search system 32-server 42-control unit 42a-registration engine 42b-search engine 52-registered user database 53-first reference Face image database 54-Second reference face image database 55-Same face image database

Claims (21)

【特許請求の範囲】[Claims] 【請求項1】概ね類似した形状を持つ複数の対象物の画
像の特徴量を記憶した特徴量記憶部と、検索対象の画像
の特徴量に基づいて検索対象の画像と同一又は類似であ
ると判定できる画像を特徴量記憶部において検索する特
徴量検索部と、を設けたことを特徴とする画像検索シス
テム。
1. A feature amount storage unit that stores feature amounts of images of a plurality of objects having substantially similar shapes, wherein the feature amount is the same as or similar to the search target image based on the feature amount of the search target image. An image search system, comprising: a feature amount search unit that searches an image that can be determined in a feature amount storage unit.
【請求項2】対象物の画像の入力を受け付ける画像入力
部と、画像入力部から入力された対象物の画像から特徴
量を抽出する特徴量抽出部と、を備え、前記特徴量検索
部が特徴量抽出部によって抽出された特徴量が互いに同
一又は類似の画像を前記特徴量記憶部において検索する
請求項1に記載の画像検索システム。
2. An image input unit for receiving an input of an image of an object, and a characteristic amount extracting unit for extracting a characteristic amount from the image of the object input from the image input unit, wherein the characteristic amount searching unit is The image search system according to claim 1, wherein the feature amount storage unit searches for images having the same or similar feature amounts extracted by the feature amount extraction unit.
【請求項3】対象物の画像の入力を受け付ける画像入力
部と、画像入力部から入力された対象物の画像から特徴
量を抽出する特徴量抽出部と、を備え、前記特徴量記憶
部が特徴量抽出部によって抽出された各対象物の画像の
特徴量を記憶するとともに、前記特徴量検索部が予め設
定された基準画像の特徴量と同一又は類似の特徴量の画
像を前記特徴量記憶部において検索する請求項1に記載
の画像検索システム。
3. An image input unit for receiving an input of an image of an object, and a characteristic amount extracting unit for extracting a characteristic amount from an image of the object input from the image input unit, wherein the characteristic amount storage unit is provided. The feature amount of each target object extracted by the feature amount extraction unit is stored, and the feature amount search unit stores an image having the same or similar feature amount as the feature amount of a preset reference image. The image search system according to claim 1, wherein the search is performed by a section.
【請求項4】前記特徴量記憶部及び前記特徴量検索部を
備えたサーバに、それぞれが前記画像入力部及び前記特
徴量抽出部を備えた複数の端末装置を接続し、サーバと
端末装置との間で対象物の画像の特徴量データ及び検索
データの送受信を行う請求項2及び3に記載の画像検索
システム。
4. A server provided with said feature amount storage unit and said feature amount search unit is connected to a plurality of terminal devices each provided with said image input unit and said feature amount extraction unit. The image search system according to claim 2, wherein the feature amount data and the search data of the image of the target object are transmitted and received between the images.
【請求項5】前記特徴量が、対象物の画像の各構成部分
のそれぞれについて個別に抽出した特徴量の組合せであ
る請求項1〜4のいずれかに記載の画像検索システム。
5. The image retrieval system according to claim 1, wherein the feature amount is a combination of feature amounts individually extracted for each component of the image of the object.
【請求項6】対象物の画像の各構成部分のそれぞれにつ
いて特徴量にしたがって分類される複数の画像部品デー
タを予め記憶した部品記憶部を備え、前記特徴量が対象
物の画像の各構成部分の特徴量に基づいて部品記憶部か
ら選択した画像部品データである請求項1〜5のいずれ
かに記載の画像検索システム。
6. A component storage unit in which a plurality of image component data classified in accordance with a feature amount for each component of an image of an object is stored in advance, and the feature amount is a component of the image of the object. The image retrieval system according to any one of claims 1 to 5, wherein the image retrieval data is image component data selected from the component storage unit based on the characteristic amount of the image component.
【請求項7】前記部品記憶部が、顔画像の各構成部分の
それぞれについて特徴量にしたがって分類される複数の
顔部品データを似顔絵画像データとして記憶する請求項
6に記載の画像検索システム。
7. The image retrieval system according to claim 6, wherein said part storage unit stores a plurality of face part data classified according to the feature amount of each of the constituent parts of the face image as portrait image data.
【請求項8】概ね類似した形状を持つ複数の対象物の画
像の特徴量を特徴量記憶部に記憶し、検索対象の画像の
特徴量に基づいて検索対象の画像と同一又は類似である
と判定できる画像を特徴量記憶部において検索すること
を特徴とする画像検索方法。
8. A feature amount storage unit for storing feature amounts of images of a plurality of objects having substantially similar shapes, and determining that the images are the same or similar to the search target image based on the feature amounts of the search target image. An image search method, wherein an image that can be determined is searched in a feature amount storage unit.
【請求項9】対象物の画像の入力を受け付け、入力され
た対象物の画像から特徴量を抽出し、抽出した対象物の
画像の特徴量が互いに同一又は類似の画像を前記特徴量
記憶部において検索する請求項8に記載の画像検索方
法。
9. An image receiving apparatus receives an input of an image of an object, extracts a feature amount from the input image of the object, and stores images having the same or similar feature amounts in the extracted image of the object. The image search method according to claim 8, wherein the search is performed in:
【請求項10】対象物の画像の画像の入力を受け付け、
入力された対象物の画像から特徴量を抽出し、抽出した
対象物の画像の特徴量を前記特徴量記憶部に記憶すると
ともに、予め設定された基準画像の特徴量と同一又は類
似の特徴量の画像を前記特徴量記憶部において検索する
請求項8に記載の画像検索方法。
10. An input of an image of an object image is received,
The feature amount is extracted from the input image of the target object, and the feature amount of the extracted image of the target object is stored in the feature amount storage unit, and the same or similar feature amount as the preset feature amount of the reference image is stored. 9. The image search method according to claim 8, wherein the image is searched for in the feature amount storage unit.
【請求項11】対象物の画像の特徴量を記憶するととも
に予め設定された基準画像の特徴量と同一又は類似の特
徴量の画像を検索するサーバと、それぞれが対象物の画
像の画像の入力を受け付けるとともに入力された対象物
の画像から特徴量を抽出する複数の端末装置と、の間で
特徴量データ及び検索データの送受信を行う請求項9及
び10に記載の画像検索方法。
11. A server for storing a feature amount of an image of an object and retrieving an image having a feature amount that is the same as or similar to a feature amount of a preset reference image; The image search method according to claim 9, wherein the method further comprises transmitting and receiving feature amount data and search data to and from a plurality of terminal devices that receive the input and extract a feature amount from the input image of the target object.
【請求項12】前記特徴量が、対象物の画像の各構成部
分のそれぞれについて個別に抽出した特徴量の組合せで
ある請求項8〜11のいずれかに記載の画像検索方法。
12. The image retrieval method according to claim 8, wherein said characteristic amount is a combination of characteristic amounts individually extracted for each component of the image of the object.
【請求項13】対象物の画像の各構成部分のそれぞれに
ついて特徴量にしたがって分類される複数の画像部品デ
ータを部品記憶部に予め記憶し、対象物の画像の各構成
部分の特徴量に対応する画像部品データを部品記憶部か
ら前記特徴量として選択する請求項8〜12のいずれか
に記載の画像検索方法。
13. A plurality of image component data classified in accordance with a feature amount for each component of an image of a target object in a component storage unit in advance, and a plurality of image component data corresponding to the feature amounts of each component portion of the image of the target object are stored. The image retrieval method according to claim 8, wherein the image component data to be selected is selected from the component storage unit as the feature amount.
【請求項14】前記部品記憶部に、顔の各構成部分のそ
れぞれについて特徴量にしたがって分類される複数の顔
部品データとして似顔絵画像データを記憶する請求項1
3に記載の画像検索方法。
14. A caricature image data is stored in the part storage unit as a plurality of face part data classified for each of the constituent parts of the face according to the feature amount.
3. The image search method according to 3.
【請求項15】概ね類似した形状を持つ複数の対象物の
画像の特徴量を特徴量記憶部に記憶する処理と、検索対
象の画像の特徴量に基づいて検索対象の画像と同一又は
類似であると判定できる画像を特徴量記憶部において検
索する処理と、からなるプログラムを記録したことを特
徴とする画像検索プログラム記録媒体。
15. A process for storing feature amounts of images of a plurality of objects having substantially similar shapes in a feature amount storage unit, wherein the process is performed on the basis of the feature amounts of the search target images in the same or similar manner as the search target images. An image search program recording medium characterized by recording a program comprising: a process of searching an image which can be determined to be present in a feature amount storage unit.
【請求項16】対象物の画像の入力を受け付ける処理
と、入力された対象物の画像から特徴量を抽出する処理
と、抽出した特徴量と同一又は類似の特徴量の画像を前
記特徴量記憶部において検索する処理と、を含むプログ
ラムを記録した請求項15に記載の画像検索プログラム
記録媒体。
16. A process for receiving an input of an image of an object, a process for extracting a feature amount from the input image of the object, and storing an image having the same or similar feature amount as the extracted feature amount. 16. The image search program recording medium according to claim 15, wherein a program including a process of searching in a unit is recorded.
【請求項17】対象物の画像の入力を受け付ける処理
と、入力された対象物の画像から特徴量を抽出する処理
と、抽出した各画像の特徴量を前記特徴量記憶部に記憶
する処理と、予め設定された基準画像の特徴量と同一又
は類似の特徴量の画像を前記特徴量記憶部において検索
する処理と、を含むプログラムを記録した請求項15に
記載の画像検索プログラム記憶媒体。
17. A process for receiving an input of an image of an object, a process for extracting a feature amount from the input image of the object, and a process for storing the feature amount of each extracted image in the feature amount storage unit. 16. The image search program storage medium according to claim 15, wherein a program including a process of searching the feature amount storage unit for an image having the same or similar feature amount as a preset reference image feature amount is recorded.
【請求項18】対象物の画像の特徴量を記憶するととも
に予め設定された基準画像の特徴量と同一又は類似の特
徴量の画像を検索するサーバと、それぞれが対象物の画
像の画像の入力を受け付けるとともに入力された対象物
の画像から特徴量を抽出する複数の端末装置と、の間で
特徴量データ及び検索データの送受信を行う処理を含む
プログラムを記録した請求項16及び17に記載の画像
検索プログラム記録媒体。
18. A server for storing a feature amount of an image of an object and retrieving an image having the same or similar feature amount as that of a preset reference image; 18. The program according to claim 16, wherein a program including a process of transmitting and receiving feature amount data and search data between a plurality of terminal devices that accepts and extracts a feature amount from an input image of the target object is recorded. Image search program recording medium.
【請求項19】前記特徴量が、対象物の画像の各構成部
分のそれぞれについて個別に抽出した特徴量の組合せで
ある請求項15〜18のいずれかに記載の画像検索プロ
グラム記録媒体。
19. The image search program recording medium according to claim 15, wherein said feature amount is a combination of feature amounts individually extracted for each component of the image of the object.
【請求項20】部品記憶部に予め記憶された画像部品デ
ータであって対象物の画像の各構成部分の特徴量に対応
する画像部品データを前記特徴量として選択する処理を
含むプログラムを記録した請求項15〜19のいずれか
に記載の画像検索プログラム記録媒体。
20. A program which includes a process of selecting image component data, which is image component data stored in advance in a component storage unit and corresponding to a feature value of each component of an image of a target object, as the feature value. An image search program recording medium according to any one of claims 15 to 19.
【請求項21】前記画像部品データが似顔絵画像データ
であり、似顔絵画像データを前記特徴量として選択する
処理を含むプログラムを記録した請求項20に記載の画
像検索プログラム記録媒体。
21. The image search program recording medium according to claim 20, wherein said image part data is portrait image data, and a program including a process of selecting portrait image data as said feature amount is recorded.
JP9211631A 1997-08-06 1997-08-06 System and method for image retrieval and image retrieval program recording medium Pending JPH1153386A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP9211631A JPH1153386A (en) 1997-08-06 1997-08-06 System and method for image retrieval and image retrieval program recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP9211631A JPH1153386A (en) 1997-08-06 1997-08-06 System and method for image retrieval and image retrieval program recording medium

Publications (1)

Publication Number Publication Date
JPH1153386A true JPH1153386A (en) 1999-02-26

Family

ID=16608983

Family Applications (1)

Application Number Title Priority Date Filing Date
JP9211631A Pending JPH1153386A (en) 1997-08-06 1997-08-06 System and method for image retrieval and image retrieval program recording medium

Country Status (1)

Country Link
JP (1) JPH1153386A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007299171A (en) * 2006-04-28 2007-11-15 Fujifilm Corp Image management server
JP2009026254A (en) * 2007-07-24 2009-02-05 Hitachi Ltd Method of retrieving vehicle image, system and program thereof
WO2010090259A1 (en) * 2009-02-05 2010-08-12 Sairyo Kazuo Portrait illustration creation system, character creation system, and created portrait illustration display system

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007299171A (en) * 2006-04-28 2007-11-15 Fujifilm Corp Image management server
JP2009026254A (en) * 2007-07-24 2009-02-05 Hitachi Ltd Method of retrieving vehicle image, system and program thereof
WO2010090259A1 (en) * 2009-02-05 2010-08-12 Sairyo Kazuo Portrait illustration creation system, character creation system, and created portrait illustration display system
JP5292415B2 (en) * 2009-02-05 2013-09-18 寿夫 西良 Caricature illustration creation system, character creation system and creation portrait display system
US8600101B2 (en) 2009-02-05 2013-12-03 Kazuo Sairyo Portrait illustration creation system, character creation system, and created portrait illustration display system

Similar Documents

Publication Publication Date Title
US10346677B2 (en) Classification and organization of consumer digital images using workflow, and face detection and recognition
US7203367B2 (en) Indexing, storage and retrieval of digital images
US8199979B2 (en) Classification system for consumer digital images using automatic workflow and face detection and recognition
US7376276B2 (en) Indexing, storage and retrieval of digital images
US7551755B1 (en) Classification and organization of consumer digital images using workflow, and face detection and recognition
US7555148B1 (en) Classification system for consumer digital images using workflow, face detection, normalization, and face recognition
JP4039847B2 (en) Image processing apparatus and program
CN106454064A (en) Image processing apparatus, and image processing method
KR20000037042A (en) Automatic character producing system
JP2020526835A (en) Devices and methods that dynamically identify a user's account for posting images
JP4090926B2 (en) Image storage method, registered image retrieval method and system, registered image processing method, and program for executing these methods
US20030215144A1 (en) Additional image extraction apparatus and method for extracting additional image
JPH1153386A (en) System and method for image retrieval and image retrieval program recording medium
JP4333481B2 (en) Image classification device, image classification program, and electronic camera
JP4117675B2 (en) Method and program for creating card photo data
JPH1185992A (en) Device and method for picture registration and retrieval and program recording medium
JP2005210369A (en) Image processing apparatus and image processing method
JP2010198199A (en) Information providing system and method
JP4650034B2 (en) Image management apparatus, image management method, and image management program
JP7106822B2 (en) Image retrieval method, server, and program
JP2010009303A (en) Sorting system for recorded image
JP4893775B2 (en) Image classification program, recording medium, and electronic camera control program
JP2005297411A (en) Photographic image printer and program
JP2005122395A (en) Medium for certification, device for issuing the same, and face collating device
JP7452591B1 (en) Image generation system and image generation method