JP2021043608A

JP2021043608A - Image collation device and program

Info

Publication number: JP2021043608A
Application number: JP2019164142A
Authority: JP
Inventors: 昌希内田; Masaki Uchida; 伊藤　直之; Naoyuki Ito; 直之伊藤; 拓也生駒; Takuya Ikoma
Original assignee: Dai Nippon Printing Co Ltd
Current assignee: Dai Nippon Printing Co Ltd
Priority date: 2019-09-10
Filing date: 2019-09-10
Publication date: 2021-03-18
Anticipated expiration: 2039-09-10
Also published as: JP7367411B2

Abstract

To provide an image collation device and a program for making an operator efficiently perform a collation work of an imprint.SOLUTION: An image inquiry device 1 includes a registered image storage unit 22 that stores a plurality of registered images, a result screen generation unit 17 that generates collation result screen data including an image matching degree calculated as a result of collation between a collation target image in which imprint information is extracted from an input image and a plurality of the registered images stored in the registered image storage unit 22 and a collation result data, and a collation result output unit 18 that outputs the collation result screen data generated by the result screen generation unit 17.SELECTED DRAWING: Figure 1

Description

本発明は、画像照会装置及びプログラムに関する。 The present invention relates to an image inquiry device and a program.

従来、銀行の口座開設や、保険の申込み等で用いられる申込書類には、押印欄が設けられていることが多い。そのため、申込時に、申込者が所有している印鑑を、申込書類に押下することが行われている。そして、銀行口座からの支払時や、保険の請求申請時に、請求申請者は、申込時に押印した印鑑を用いて請求申請書類を作成して提出する。銀行や保険会社等の請求申請を受け付ける側においては、請求申請書類に押印された印影と、申込書類に押印され事前に登録された印影とが同じであるかを確認することによって、申込者と同じ者が請求申請をしたものであるか否かを確認する。このように、印鑑を用いての本人の確認は、様々な場面で行われており、印影の照会業務の効率化が求められている。 Conventionally, application documents used for opening a bank account, applying for insurance, etc. are often provided with a seal column. Therefore, at the time of application, a seal owned by the applicant is stamped on the application documents. Then, when paying from a bank account or applying for an insurance claim, the claim applicant prepares and submits a claim application document using the seal stamped at the time of application. On the side of accepting claims such as banks and insurance companies, by confirming that the imprint stamped on the claim application documents and the imprint stamped on the application documents and registered in advance are the same, the applicant and the applicant Check if the same person applied for the claim. In this way, the identification of the person using the seal stamp is performed in various situations, and it is required to improve the efficiency of the inquiry work of the seal imprint.

そこで、押印対象に押された印影である照合対象印影と予め登録された印影である照合元印影とが一致するか否かを判定する印影照合装置において、前記押印対象の印影が表された面である印影面のイメージデータを取得するイメージデータ取得手段と、前記印影面のイメージデータから前記照合対象印影の色を有するイメージデータのみを抽出するイメージ抽出手段と、前記イメージ抽出手段によって抽出されたイメージデータの中から前記照合元印影の大きさを有すると認められる範囲のイメージデータを照合対象印影のイメージデータとして取り出す照合対象特定手段と前記照合元印影のイメージデータと前記照合対象印影のイメージデータとを対比して両者が一致するか否かを判定する判定手段とを備えたことを特徴とする印影照合装置が開示されている（例えば、特許文献１）。 Therefore, in the imprint collation device for determining whether or not the collation target imprint, which is the imprint stamped on the imprint target, and the collation source imprint, which is the pre-registered imprint, match, the surface on which the imprint of the imprint target is represented. The image data acquisition means for acquiring the image data of the imprint surface, the image extraction means for extracting only the image data having the color of the imprint to be collated from the image data of the imprint surface, and the image extraction means. From the image data, the image data in the range recognized as having the size of the collation source imprint is taken out as the image data of the collation target imprint. The collation target specifying means, the image data of the collation source imprint, and the image data of the collation target imprint. (For example, Patent Document 1) discloses a stamp imprint collation apparatus including a determination means for determining whether or not the two match with each other (for example, Patent Document 1).

特開平１１−９６３６２号公報Japanese Unexamined Patent Publication No. 11-96362

特許文献１に記載されている印影照合装置は、押印対象に押された印影である照合対象印影と予め登録された印影である照合元印影とが一致するか否かを判定するものであった。つまり、人によるチェックなしに、自動的に一致及び不一致を判定するものである。しかし、印影は、印鑑を押印する際の押印圧や、朱肉の付け具合等によって変化する。また、近年は、機械を用いて印鑑が作成されるものが多くなっており、類似する形状の印鑑も多い。そのため、印影の照会を完全に自動化することは、現実的ではない。 The imprint collation device described in Patent Document 1 determines whether or not the collation target imprint, which is the imprint stamped on the imprint target, and the collation source imprint, which is the pre-registered imprint, match. .. That is, the match and the mismatch are automatically determined without a human check. However, the imprint changes depending on the stamping pressure when stamping the stamp, the degree of red meat, and the like. Further, in recent years, many stamps are created by using a machine, and many stamps have a similar shape. Therefore, it is not realistic to fully automate the query of imprints.

そこで、本発明は、オペレータによる印影の照会業務を効率的に行わせるための画像照会装置及びプログラムを提供することを目的とする。 Therefore, an object of the present invention is to provide an image inquiry device and a program for efficiently performing an inquiry operation of an imprint by an operator.

本発明は、以下のような解決手段により、前記課題を解決する。
第１の発明は、複数の登録画像を記憶した登録画像記憶部と、入力画像から印影情報が抽出された照合対象画像と、前記登録画像記憶部に記憶された前記複数の登録画像とを照合した結果算出された画像の一致度合いと、照合結果データとを含む照合結果画面データを生成する結果画面生成手段と、前記結果画面生成手段により生成された前記照合結果画面データを出力する照合結果出力手段と、を備える画像照会装置である。
第２の発明は、第１の発明の画像照会装置において、前記照合対象画像及び前記登録画像の一部領域である比較対象領域ごとに一致率を算出し、算出した一致率に応じて、前記登録画像に対して前記比較対象領域を強調した画像である加工画像を生成する加工画像生成手段を備え、前記照合結果データは、前記照合対象画像と、前記加工画像生成手段により生成した前記加工画像とを含む、画像照会装置である。
第３の発明は、第１の発明又は第２の発明の画像照会装置において、前記登録画像記憶部は、前記複数の登録画像を全方向に回転させた回転画像を、一の登録画像を基準とした回転角度に対応させて記憶する、画像照会装置である。
第４の発明は、第１の発明から第３の発明までのいずれかの画像照会装置において、前記結果画面生成手段は、前記一致度合いが閾値以上の前記照合結果データを含む前記照合結果画面データを生成する、画像照会装置である。
第５の発明は、第１の発明から第４の発明までのいずれかの画像照会装置において、前記入力画像を受け付ける入力画像受付手段と、前記入力画像受付手段により受け付けた前記入力画像の色に基づいて前記印影情報を抽出する印影抽出手段と、を備える、画像照会装置である。
第６の発明は、第１の発明から第５の発明までのいずれかの画像照会装置において、前記登録画像記憶部に記憶された前記複数の登録画像の各々に対応付けて、各登録画像に対応する個人を特定する情報である登録個人特定情報を記憶する個人特定情報記憶部と、前記入力画像に対応する個人を特定する情報である入力個人特定情報を受け付ける個人特定情報受付手段と、前記個人特定情報受付手段により受け付けた前記入力個人特定情報に基づいて前記個人特定情報記憶部を検索し、前記入力個人特定情報に一致する前記登録個人特定情報があった場合に、前記登録個人特定情報に対応付けられた前記登録画像を、前記登録画像記憶部から抽出する対象登録画像抽出手段と、を備え、前記結果画面生成手段は、前記照合対象画像と前記対象登録画像抽出手段により抽出された前記登録画像とを照合した前記照合結果データを強調表示した、前記照合結果画面データを生成する、画像照会装置である。
第７の発明は、第６の発明の画像照会装置において、前記結果画面生成手段は、前記照合対象画像と前記対象登録画像抽出手段により抽出された前記登録画像とを照合した前記照合結果データのみを含む、前記照合結果画面データを生成する、画像照会装置である。
第８の発明は、第１の発明から第５の発明までのいずれかの画像照会装置において、前記登録画像記憶部は、前記登録画像が示す文字データを、前記登録画像に対応付けて記憶し、前記入力画像に対して文字認識処理を行ってテキストデータを抽出するテキスト生成手段と、前記テキスト生成手段により抽出された前記テキストデータに基づいて前記登録画像記憶部を検索し、前記テキストデータに一致する文字データが対応付けられた前記登録画像を、前記登録画像記憶部から抽出する絞込画像抽出手段と、を備え、前記結果画面生成手段は、前記照合対象画像と、前記絞込画像抽出手段により抽出された前記登録画像とを照合して、前記照合結果画面データを生成する、画像照会装置である。
第９の発明は、第１の発明から第８の発明までのいずれかの画像照会装置としてコンピュータを機能させるためのプログラムである。 The present invention solves the above problems by the following solutions.
The first invention collates a registered image storage unit that stores a plurality of registered images, a collation target image in which imprint information is extracted from an input image, and the plurality of registered images stored in the registered image storage unit. A result screen generation means for generating the matching result screen data including the matching degree of the image calculated as a result and the matching result data, and a matching result output for outputting the matching result screen data generated by the result screen generating means. An image inquiry device including means.
In the second invention, in the image inquiry device of the first invention, a matching rate is calculated for each of the matching target image and the comparison target area which is a part of the registered image, and the matching rate is calculated according to the calculated matching rate. A processed image generation means for generating a processed image which is an image in which the comparison target area is emphasized with respect to the registered image is provided, and the collation result data includes the collation target image and the processed image generated by the processed image generation means. It is an image inquiry device including.
The third invention is the image inquiry device of the first invention or the second invention, in which the registered image storage unit uses a rotated image obtained by rotating the plurality of registered images in all directions with reference to one registered image. It is an image inquiry device that stores the image corresponding to the rotation angle.
According to a fourth aspect of the present invention, in any of the image inquiry devices from the first invention to the third invention, the result screen generating means includes the collation result screen data having the matching degree equal to or more than a threshold value. It is an image inquiry device that generates.
A fifth invention relates to an input image receiving means for receiving the input image and a color of the input image received by the input image receiving means in any of the image inquiry devices from the first invention to the fourth invention. It is an image inquiry apparatus including an imprint extraction means for extracting the imprint information based on the imprint information.
A sixth invention relates to each of the plurality of registered images stored in the registered image storage unit in any of the image inquiry devices from the first invention to the fifth invention, and is associated with each registered image. A personal identification information storage unit that stores registered personal identification information that is information that identifies the corresponding individual, a personal identification information receiving means that receives input personal identification information that is information that identifies the individual corresponding to the input image, and the above. The personal identification information storage unit is searched based on the input personal identification information received by the personal identification information receiving means, and when there is the registered personal identification information matching the input personal identification information, the registered personal identification information is found. The registered image associated with the above is provided with a target registered image extracting means for extracting the registered image from the registered image storage unit, and the result screen generating means is extracted by the collation target image and the target registered image extracting means. An image inquiry device that generates the collation result screen data by highlighting the collation result data collated with the registered image.
According to a seventh aspect of the invention, in the image inquiry device of the sixth invention, the result screen generation means is only the collation result data in which the collation target image and the registered image extracted by the target registration image extraction means are collated. This is an image inquiry device that generates the collation result screen data including the above.
In the eighth invention, in any of the image inquiry devices from the first invention to the fifth invention, the registered image storage unit stores the character data indicated by the registered image in association with the registered image. , The text generation means for extracting text data by performing character recognition processing on the input image, and the registered image storage unit are searched based on the text data extracted by the text generation means, and the text data is converted into the text data. The narrowed-down image extraction means for extracting the registered image associated with matching character data from the registered image storage unit is provided, and the result screen generating means includes the collation target image and the narrowed-down image extraction. It is an image inquiry device that collates with the registered image extracted by the means and generates the collation result screen data.
The ninth invention is a program for operating a computer as any of the image inquiry devices from the first invention to the eighth invention.

本発明によれば、オペレータによる印影の照会業務を効率的に行わせるための画像照会装置及びプログラムを提供することができる。 According to the present invention, it is possible to provide an image inquiry device and a program for efficiently performing an imprint inquiry operation by an operator.

本実施形態に係る画像照会システムの全体構成及び画像照会装置の機能ブロックを示す図である。It is a figure which shows the whole structure of the image inquiry system which concerns on this embodiment, and the functional block of an image inquiry apparatus. 本実施形態に係る画像照会装置の画像照会処理を示すフローチャートである。It is a flowchart which shows the image inquiry processing of the image inquiry apparatus which concerns on this embodiment. 図２の続きである。It is a continuation of FIG. 本実施形態に係る画像照会装置での表示例を示す図である。It is a figure which shows the display example in the image inquiry apparatus which concerns on this embodiment. 本実施形態に係る画像照会装置での他の表示例を示す図である。It is a figure which shows the other display example in the image inquiry apparatus which concerns on this embodiment.

以下、本発明を実施するための形態について、図を参照しながら説明する。なお、これは、あくまでも一例であって、本発明の技術的範囲はこれに限られるものではない。
（実施形態）
＜画像照会システム１００＞
図１は、本実施形態に係る画像照会システム１００の全体構成及び画像照会装置１の機能ブロックを示す図である。 Hereinafter, embodiments for carrying out the present invention will be described with reference to the drawings. It should be noted that this is only an example, and the technical scope of the present invention is not limited to this.
(Embodiment)
<Image inquiry system 100>
FIG. 1 is a diagram showing an overall configuration of an image inquiry system 100 and a functional block of an image inquiry device 1 according to the present embodiment.

画像照会システム１００は、例えば、銀行等の金融機関、生命保険や損害保険等の保険会社等で使用するものである。画像照会システム１００では、スキャナ６を用いて照合対象である書類に押印された印鑑の印影を画像化する。そして、画像照会システム１００では、画像照会装置１が、スキャナ６から受け付けた画像（入力画像）と、予め登録された印影画像（登録画像）との一致度合いを分かりやすく可視化する。 The image inquiry system 100 is used, for example, by a financial institution such as a bank, an insurance company such as life insurance or non-life insurance, and the like. The image inquiry system 100 uses the scanner 6 to image the imprint of the seal stamped on the document to be collated. Then, in the image inquiry system 100, the image inquiry device 1 visualizes the degree of matching between the image (input image) received from the scanner 6 and the pre-registered imprint image (registered image) in an easy-to-understand manner.

図１に示すように、画像照会システム１００は、画像照会装置１と、スキャナ６とを備える。画像照会装置１と、スキャナ６とは、例えば、通信線によって通信可能に接続されている。なお、画像照会装置１と、スキャナ６とは、通信可能に接続されていなくてもよく、その場合には、例えば、記憶媒体等を用いて、スキャナ６が読み取って得た画像を、画像照会装置１に受け渡せばよい。 As shown in FIG. 1, the image inquiry system 100 includes an image inquiry device 1 and a scanner 6. The image inquiry device 1 and the scanner 6 are communicably connected by, for example, a communication line. The image inquiry device 1 and the scanner 6 do not have to be communicably connected to each other. In that case, for example, an image read by the scanner 6 using a storage medium or the like is referred to for an image. It may be handed over to the device 1.

＜画像照会装置１＞
画像照会装置１は、スキャナ６から受け付けた画像に対して画像処理を行って、予め登録済の複数の印影画像である登録画像との一致度合いを可視化する処理を行う装置である。
画像照会装置１は、制御部１０と、記憶部２０と、表示部２６と、入力部２７と、通信インタフェース部２９とを備える。
制御部１０は、画像照会装置１の全体を制御する中央処理装置（ＣＰＵ）である。制御部１０は、記憶部２０に記憶されているオペレーティングシステム（ＯＳ）やアプリケーションプログラムを適宜読み出して実行することにより、上述したハードウェアと協働し、各種機能を実行する。 <Image inquiry device 1>
The image inquiry device 1 is a device that performs image processing on the image received from the scanner 6 and visualizes the degree of matching with the registered image which is a plurality of pre-registered imprint images.
The image inquiry device 1 includes a control unit 10, a storage unit 20, a display unit 26, an input unit 27, and a communication interface unit 29.
The control unit 10 is a central processing unit (CPU) that controls the entire image inquiry device 1. The control unit 10 appropriately reads and executes the operating system (OS) and the application program stored in the storage unit 20 to cooperate with the above-mentioned hardware and execute various functions.

制御部１０は、入力画像受付部１１（入力画像受付手段）と、個人特定情報受付部１２（個人特定情報受付手段）と、印影抽出部１３（印影抽出手段）と、対象登録画像抽出部１４（対象登録画像抽出手段）と、画像照合部１５と、加工画像生成部１６（加工画像生成手段）と、結果画面生成部１７（結果画面生成手段）と、照合結果出力部１８（照合結果出力手段）とを備える。 The control unit 10 includes an input image reception unit 11 (input image reception means), a personal identification information reception unit 12 (personal identification information reception means), an imprint extraction unit 13 (imprint extraction means), and a target registration image extraction unit 14. (Target registration image extraction means), image collation unit 15, processed image generation unit 16 (processed image generation means), result screen generation unit 17 (result screen generation means), and collation result output unit 18 (collation result output). Means) and.

入力画像受付部１１は、印影の照合に用いる画像を、スキャナ６から受け付ける。受け付ける画像は、請求申請時に作成した請求申請書類に押下された印鑑の印影を画像化したものである。
個人特定情報受付部１２は、請求申請者が請求申請書類に記載した内容の少なくとも一部であって、個人を特定可能な情報である個人特定情報（入力個人特定情報）を、例えば、入力部２７を介して受け付ける。又は、個人特定情報受付部１２は、文字認識によって自動的に個人特定情報を抽出してもよい。ここで、個人特定情報は、例えば、請求申請者の氏名であり、その他、住所、性別、電話番号等を含んでもよい。また、個人特定情報は、例えば、預金口座番号や、保険証書番号等であってもよい。 The input image receiving unit 11 receives an image used for collating the imprint from the scanner 6. The image to be accepted is an image of the imprint of the seal stamped on the billing application document created at the time of billing application.
The personal identification information receiving unit 12 inputs, for example, personal identification information (input personal identification information) that is at least a part of the contents described in the request application document by the requester and is information that can identify an individual. Accept via 27. Alternatively, the personal identification information receiving unit 12 may automatically extract the personal identification information by character recognition. Here, the personal identification information is, for example, the name of the claimant, and may also include an address, gender, telephone number, and the like. Further, the personal identification information may be, for example, a deposit account number, an insurance certificate number, or the like.

印影抽出部１３は、入力画像受付部１１が受け付けた印影の照合に用いる入力画像から印影情報を抽出し、照合対象画像を生成する。例えば、請求申請書類の印鑑押印欄に「印」等の文字が印刷されており、「印」の文字上に押印する場合に、印影の照合に用いる画像は、印鑑の印影の他に、「印」の文字をも含んでいる場合が多いが、印影の照合に用いる画像は、印鑑の印影が朱色である場合が多い一方、「印」の文字は、黒や灰色等である場合が多い。そのため、印影抽出部１３は、画像の色に基づいて、例えば、朱色及び朱色に類似する色の画像だけを抽出し、抽出した画像である印影情報を、照合対象画像にする。印影抽出部１３による処理を行うことによって、照合対象画像を、「印」の文字等を含まない、印鑑の印影のみにできる。 The imprint extraction unit 13 extracts imprint information from the input image used for collating the imprint received by the input image reception unit 11, and generates a collation target image. For example, characters such as "seal" are printed in the seal stamp column of the request application document, and when stamping on the character of "seal", the image used for collation of the seal imprint is "in addition to the seal imprint of the seal". In many cases, the characters of "seal" are also included, but in the image used for collating the seal imprint, the imprint of the seal is often red, while the characters of "seal" are often black or gray. .. Therefore, the imprint extraction unit 13 extracts, for example, only an image of vermilion and a color similar to vermilion based on the color of the image, and sets the imprint information, which is the extracted image, as the collation target image. By performing the processing by the imprint extraction unit 13, the collation target image can be only the imprint of the seal stamp, which does not include the characters of "seal" and the like.

対象登録画像抽出部１４は、登録画像記憶部２２に記憶された複数の登録画像から、個人特定情報受付部１２が受け付けた個人特定情報に対応付けられた登録画像がある場合に、その登録画像を、対象登録画像として抽出する。
画像照合部１５は、印影抽出部１３により印影情報が抽出された照合対象画像と、登録画像記憶部２２に記憶された複数の登録画像とを照合する。画像照合部１５は、例えば、照合対象画像と、照合する１つの登録画像とについて、まず、位置及び向きを変更しながら、テンプレートマッチングを行って画素値の差分から一致度合いを算出し、その最大値を用いて一致及び不一致を判定する。また、画像照合部１５は、例えば、ディープラーニングにより生成された学習済みモデルを用いて判定することもできる。この場合、学習済みモデルは、個人毎に対応付けられた複数の登録画像をそれぞれ学習し、該当する学習済みモデルに照合対象となる画像を入力することで一致度合いを算出することが可能である。 When the target registered image extraction unit 14 has a registered image associated with the personal identification information received by the personal identification information receiving unit 12 from a plurality of registered images stored in the registered image storage unit 22, the registered image is registered. Is extracted as a target registration image.
The image collation unit 15 collates the collation target image from which the imprint information has been extracted by the imprint extraction unit 13 with a plurality of registered images stored in the registered image storage unit 22. For example, the image collation unit 15 performs template matching on the collation target image and one registered image to be collated while changing the position and orientation, calculates the degree of matching from the difference in pixel values, and calculates the maximum. Use the values to determine match or mismatch. Further, the image matching unit 15 can also make a determination using, for example, a trained model generated by deep learning. In this case, the trained model can calculate the degree of matching by learning each of a plurality of registered images associated with each individual and inputting the image to be collated into the trained model. ..

加工画像生成部１６は、画像照合部１５による照合結果として、照合する１つの登録画像に対して不一致度合の影響が大きい領域（比較対象領域）を強調させた加工画像を生成する。そして、不一致の部分について、不一致の度合いに応じて、色による強調をする。例えば、ヒートマップとして、不一致の度合いが低い箇所は、青色にし、不一致の度合い箇所は、赤色にする等、不一致の度合いを特徴量として、色や濃度を用いて強調する。この場合、一致の箇所は、特段の処理を行わない。 The processed image generation unit 16 generates, as a collation result by the image collation unit 15, a processed image in which a region (comparison target region) in which the degree of inconsistency has a large influence on one registered image to be collated is emphasized. Then, the inconsistent portion is emphasized by color according to the degree of inconsistency. For example, in a heat map, a part having a low degree of inconsistency is made blue, and a part having a degree of inconsistency is made into red. In this case, no special processing is performed on the matching portion.

結果画面生成部１７は、画像照合部１５が算出した一致度合いと、照合結果データとを含む照合結果画面データを生成する。ここで、一致度合いは、１００％を完全一致とした場合の確信度であり、０％から１００％までの範囲で表されるものである。また、照合結果データは、照合対象画像と、加工画像生成部１６により生成された加工画像とを含む。
さらに、一致度合いの低いものは他人の登録印影である可能性が高く、正解を絞り込みやすくするために、結果画面生成部１７は、閾値以上の一致度合いである照合結果データに限定した照合結果画面データを生成してもよい。
照合結果出力部１８は、結果画面生成部１７が生成した照合結果画面データを、表示部２６に出力する。 The result screen generation unit 17 generates collation result screen data including the matching degree calculated by the image collation unit 15 and the collation result data. Here, the degree of agreement is the degree of certainty when 100% is an exact match, and is expressed in the range of 0% to 100%. Further, the collation result data includes a collation target image and a processed image generated by the processed image generation unit 16.
Further, the one with a low degree of matching is likely to be a registered imprint of another person, and in order to make it easier to narrow down the correct answer, the result screen generation unit 17 is limited to the matching result data having a matching degree equal to or higher than the threshold value. Data may be generated.
The collation result output unit 18 outputs the collation result screen data generated by the result screen generation unit 17 to the display unit 26.

記憶部２０は、制御部１０が各種の処理を実行するために必要なプログラム、データ等を記憶するためのハードディスク、半導体メモリ素子等の記憶領域である。
ここで、コンピュータとは、制御部、記憶装置等を備えた情報処理装置をいい、画像照会装置１は、制御部１０、記憶部２０等を備えた情報処理装置であり、コンピュータの概念に含まれる。
記憶部２０は、プログラム記憶部２１と、登録画像記憶部２２と、個人特定情報記憶部２３とを備える。 The storage unit 20 is a storage area for a hard disk, a semiconductor memory element, or the like for storing programs, data, and the like necessary for the control unit 10 to execute various processes.
Here, the computer refers to an information processing device including a control unit, a storage device, and the like, and the image inquiry device 1 is an information processing device including a control unit 10, a storage unit 20, and the like, and is included in the concept of a computer. Is done.
The storage unit 20 includes a program storage unit 21, a registered image storage unit 22, and a personal identification information storage unit 23.

プログラム記憶部２１は、各種プログラムを記憶する記憶領域である。プログラム記憶部２１は、プログラム２１ａを記憶している。プログラム２１ａは、画像照会装置１の制御部１０が実行する各種機能を行うためのプログラムである。 The program storage unit 21 is a storage area for storing various programs. The program storage unit 21 stores the program 21a. The program 21a is a program for performing various functions executed by the control unit 10 of the image inquiry device 1.

登録画像記憶部２２は、照合に用いる印影情報の画像（印影画像）を記憶する記憶領域である。登録画像記憶部２２には、予め印影画像が登録されている。登録画像記憶部２２に記憶された印影画像は、例えば、申込書類に押印された印鑑の印影である。そして、この印影画像は、例えば、「印」等の不要な文字が除かれたものであり、登録画像という。なお、申込書類に押印された印鑑の印影画像から不要なものを除く処理は、上述の印影抽出部１３と同じ処理によって行うことができる。
登録画像記憶部２２は、１つの印影画像をベースにして、全方向に回転させた回転画像を記憶してもよい。また、ディープラーニングを用いる場合は、学習済みモデルが記憶される。 The registered image storage unit 22 is a storage area for storing an image (imprint image) of imprint information used for collation. An imprint image is registered in advance in the registered image storage unit 22. The imprint image stored in the registered image storage unit 22 is, for example, the imprint of the seal stamped on the application document. Then, this imprint image is, for example, an image from which unnecessary characters such as "mark" are removed, and is called a registered image. The process of removing unnecessary items from the imprint image of the seal stamped on the application document can be performed by the same process as the imprint extraction unit 13 described above.
The registered image storage unit 22 may store a rotated image rotated in all directions based on one imprint image. When deep learning is used, the trained model is stored.

個人特定情報記憶部２３は、個人特定情報（登録個人特定情報）を記憶する記憶領域である。個人特定情報記憶部２３は、個人を特定する識別情報に対応付けて、個人ごとに個人特定情報が記憶される。また、登録画像記憶部２２に記憶された印影画像には、それぞれ対応する個人が特定可能なように対応する個人特定情報が対応付けられて記憶されている。
表示部２６は、例えば、ＬＣＤ（ＬｉｑｕｉｄＣｒｙｓｔａｌＤｉｓｐｌａｙ）等の表示装置である。
入力部２７は、例えば、キーボードやマウス等の入力装置である。
通信インタフェース部２９は、通信線を経由してスキャナ６との間の通信を行うためのインタフェースである。 The personal identification information storage unit 23 is a storage area for storing personal identification information (registered personal identification information). The personal identification information storage unit 23 stores personal identification information for each individual in association with the identification information that identifies the individual. Further, the imprint image stored in the registered image storage unit 22 is stored in association with the corresponding personal identification information so that the corresponding individual can be identified.
The display unit 26 is, for example, a display device such as an LCD (Liquid Crystal Display).
The input unit 27 is, for example, an input device such as a keyboard or a mouse.
The communication interface unit 29 is an interface for performing communication with the scanner 6 via a communication line.

＜スキャナ６＞
スキャナ６は、例えば、ＭＦＰ（ＭｕｌｔｉＦｕｎｃｔｉｏｎＰｅｒｉｐｈｅｒａｌ）であり、請求申請書類の押印欄をスキャンして（読み取って）、画像を生成する装置である。スキャナ６は、生成した画像を、印影の照合に用いる画像として画像照会装置１に送信する。スキャナ６は、図示しないが、制御部、記憶部、読取部、通信インタフェース部等を備える。 <Scanner 6>
The scanner 6 is, for example, an MFP (Multifunction Peripheral), which is a device that scans (reads) the stamped field of a billing application document and generates an image. The scanner 6 transmits the generated image to the image inquiry device 1 as an image used for collating the imprint. Although not shown, the scanner 6 includes a control unit, a storage unit, a reading unit, a communication interface unit, and the like.

＜処理の説明＞
次に、画像照会装置１を用いた画像の照会処理について説明する。
図２及び図３は、本実施形態に係る画像照会装置１の画像照会処理を示すフローチャートである。
図４は、本実施形態に係る画像照会装置１での表示例を示す図である。
以下に説明する処理は、１つの請求申請書類に押印された印影に関する処理である。よって、複数の請求申請書類に関して処理をする場合には、画像照会装置１は、請求申請書類ごとに本処理を繰り返し行うことになる。 <Explanation of processing>
Next, an image inquiry process using the image inquiry device 1 will be described.
2 and 3 are flowcharts showing an image inquiry process of the image inquiry device 1 according to the present embodiment.
FIG. 4 is a diagram showing a display example in the image inquiry device 1 according to the present embodiment.
The process described below is a process relating to the imprint stamped on one request application document. Therefore, when processing a plurality of billing application documents, the image inquiry device 1 repeats this processing for each billing application document.

図２のステップＳ（以下、単に「Ｓ」という。）１１において、画像照会装置１の制御部１０（入力画像受付部１１）は、スキャナ６から印影の照合に用いる画像である入力画像を受け付ける。
Ｓ１２において、制御部１０（個人特定情報受付部１２）は、入力部２７を介して入力画像に対応する個人特定情報を受け付ける。 In step S (hereinafter, simply referred to as “S”) 11 of FIG. 2, the control unit 10 (input image receiving unit 11) of the image inquiry device 1 receives an input image which is an image used for collating the imprint from the scanner 6. ..
In S12, the control unit 10 (personal identification information receiving unit 12) receives the personal identification information corresponding to the input image via the input unit 27.

Ｓ１３において、制御部１０（印影抽出部１３）は、Ｓ１１で受け付けた入力画像から印影情報を抽出して照合対象画像を生成する。
Ｓ１４において、制御部１０（対象登録画像抽出部１４）は、Ｓ１２で受け付けた個人特定情報に基づいて登録画像記憶部２２を検索し、対象登録画像を抽出してもよい。ここで、制御部１０は、Ｓ１２で受け付けた個人特定情報に対応する対象登録画像が登録画像記憶部２２に記憶されていない場合には、抽出できずに本処理を終了する。その場合には、制御部１０は、次に説明するＳ１５及びＳ１６の処理を行わず、図３のＳ１７に処理を移す。 In S13, the control unit 10 (imprint extraction unit 13) extracts imprint information from the input image received in S11 to generate a collation target image.
In S14, the control unit 10 (target registered image extraction unit 14) may search the registered image storage unit 22 based on the personal identification information received in S12 and extract the target registered image. Here, if the target registered image corresponding to the personal identification information received in S12 is not stored in the registered image storage unit 22, the control unit 10 cannot extract the target registered image and ends this process. In that case, the control unit 10 does not perform the processes of S15 and S16 described below, but shifts the process to S17 of FIG.

Ｓ１５において、制御部１０（画像照合部１５）は、Ｓ１３の処理によって抽出した印影情報である照合対象画像と、Ｓ１４の処理によって抽出した対象登録画像とを照合し、両画像の一致度合いを算出する。また、制御部１０は、照合対象画像と、対象登録画像とで異なる部分領域の箇所（比較対象領域）を検出し、一致度合いを判定する。
Ｓ１６において、制御部１０（加工画像生成部１６）は、対象登録画像に対して照合対象画像との不一致度合の影響が大きい箇所を強調させた加工画像を生成する。 In S15, the control unit 10 (image collation unit 15) collates the collation target image, which is the imprint information extracted by the process of S13, with the target registration image extracted by the process of S14, and calculates the degree of matching between the two images. To do. Further, the control unit 10 detects a portion of a partial region (comparison target region) different between the collation target image and the target registration image, and determines the degree of matching.
In S16, the control unit 10 (processed image generation unit 16) generates a processed image in which a portion of the target registered image that is greatly affected by the degree of inconsistency with the collation target image is emphasized.

図３のＳ１７において、制御部１０は、対象登録画像を除く登録画像を、登録画像記憶部２２から１つ抽出する。
Ｓ１８において、制御部１０（画像照合部１５）は、Ｓ１３の処理によって抽出した印影情報である照合対象画像と、Ｓ１７の処理によって抽出した１つの登録画像とを照合し、両画像の一致度合いを算出する。また、制御部１０は、照合対象画像と登録画像とで異なる箇所を検出し、一致度合いを判定する。
Ｓ１９において、制御部１０（加工画像生成部１６）は、登録画像に対して照合対象画像との不一致度合の影響が大きい箇所を強調させた加工画像を生成する。 In S17 of FIG. 3, the control unit 10 extracts one registered image excluding the target registered image from the registered image storage unit 22.
In S18, the control unit 10 (image collation unit 15) collates the collation target image, which is the imprint information extracted by the process of S13, with one registered image extracted by the process of S17, and determines the degree of matching between the two images. calculate. Further, the control unit 10 detects different parts between the collation target image and the registered image, and determines the degree of matching.
In S19, the control unit 10 (processed image generation unit 16) generates a processed image in which a portion of the registered image that is greatly affected by the degree of inconsistency with the collation target image is emphasized.

Ｓ２０において、制御部１０は、登録画像記憶部２２に記憶された全ての登録画像について処理をしたか否かを判断する。全ての登録画像について処理をした場合（Ｓ２０：ＹＥＳ）には、制御部１０は、処理をＳ２１に移す。他方、全ての登録画像について処理をしていない場合（Ｓ２０：ＮＯ）には、制御部１０は、処理をＳ１７に移し、未処理の登録画像を、登録画像記憶部２２から１つ抽出して、画像の照合処理（Ｓ１８）及び加工画像の生成処理（Ｓ１９）を行う。 In S20, the control unit 10 determines whether or not all the registered images stored in the registered image storage unit 22 have been processed. When all the registered images are processed (S20: YES), the control unit 10 shifts the processing to S21. On the other hand, when all the registered images have not been processed (S20: NO), the control unit 10 shifts the processing to S17 and extracts one unprocessed registered image from the registered image storage unit 22. , Image collation processing (S18) and processed image generation processing (S19) are performed.

Ｓ２１において、制御部１０（結果画面生成部１７）は、照合結果画面データを生成する。照合結果画面データは、照合対象画像と、対象登録画像を加工した加工画像とを含み、両画像の一致率を含む。また、照合結果画面データは、照合対象画像と、複数の登録画像の各々を加工した加工画像とを含み、照合対象画像と各々の登録画像との一致率を含む。
Ｓ２２において、制御部１０（照合結果出力部１８）は、Ｓ２１で生成した照合結果画面データを、表示部２６に出力する。その後、制御部１０は、本処理を終了する。なお、個人特定情報を用いて対象登録画像を特定した後に、一致度合いを判定する処理について説明を行ったが、これに限定されない。例えば、個人特定情報を用いずに入力された判定対象となる画像との一致度合いについて登録されている全データとの照合を行い、結果を出力することも可能である。 In S21, the control unit 10 (result screen generation unit 17) generates collation result screen data. The collation result screen data includes a collation target image and a processed image obtained by processing the target registration image, and includes a matching rate of both images. Further, the collation result screen data includes a collation target image and a processed image obtained by processing each of the plurality of registered images, and includes a matching rate between the collation target image and each registered image.
In S22, the control unit 10 (collation result output unit 18) outputs the collation result screen data generated in S21 to the display unit 26. After that, the control unit 10 ends this process. The process of determining the degree of matching after identifying the target registered image using the personal identification information has been described, but the present invention is not limited to this. For example, it is also possible to collate all the registered data with respect to the degree of matching with the image to be determined, which is input without using the personal identification information, and output the result.

図４は、Ｓ２２の処理によって表示部２６に表示された照合結果画面４０の例を示す。
照合結果画面４０は、照合対象画像領域４１と、対象登録画像領域４３と、登録画像領域４６とを含む。
照合対象画像領域４１は、照合対象画像４２を表示させるための領域である。
対象登録画像領域４３は、登録画像記憶部２２に記憶された登録画像のうち、照合対象画像４２に係る個人特定情報と同一の個人特定情報に対応付けられた登録画像を加工した加工画像４４と、一致率表示部４５とを含む。 FIG. 4 shows an example of the collation result screen 40 displayed on the display unit 26 by the process of S22.
The collation result screen 40 includes a collation target image area 41, a target registration image area 43, and a registration image area 46.
The collation target image area 41 is an area for displaying the collation target image 42.
The target registered image area 43 is a processed image 44 obtained by processing a registered image associated with the same personal identification information as the personal identification information related to the collation target image 42 among the registered images stored in the registered image storage unit 22. , The matching rate display unit 45 and the like are included.

図４に示す例では、照合対象画像４２には、一部の画像が欠落した欠落箇所４２ａがある。他方、登録画像は、一部が欠落しているものではない。そのため、照合対象画像４２の欠落箇所４２ａに対応する対応箇所４４ａが、不一致であることが分かりやすく示すように、色付けがされている。ここで、対応箇所４４ａは、ヒートマップによる出力がされている。ヒートマップとは、不一致部分を直観的に理解できるように、一致度合いを色で分けて表示することによって可視化する手法である。 In the example shown in FIG. 4, the collation target image 42 has a missing portion 42a in which a part of the image is missing. On the other hand, the registered image is not partially missing. Therefore, the corresponding portion 44a corresponding to the missing portion 42a of the collation target image 42 is colored so as to clearly show that they do not match. Here, the corresponding portion 44a is output by a heat map. The heat map is a method of visualizing the degree of matching by displaying it in different colors so that the inconsistent part can be intuitively understood.

同様に、登録画像領域４６には、対象登録画像を除く、照合した登録画像を加工した加工画像と一致率とが対応付けられた照合結果データ４６ａ、４６ｂ、４６ｃを含む。なお、制御部１０は、一致率の高い順に照合結果データ４６ａから４６ｃとして並べるようにしてもよい。
この照合結果画面４０によって、オペレータは、請求申請書類に押印された入力印が登録画像記憶部２２に登録された登録画像である登録印と同じであるか否かを、一致率や加工画像を見ながら確認ができる。よって、オペレータは、一致率と、異なる箇所とを重点的に見ることができ、不自然な印影か否かをオペレータが確認するための支援ができる。なお、表示する登録画像は、複数候補が記憶されている場合には予め設定された代表画像を表示してもよいし、ランダムでいずれかの画像を表示することも可能である。 Similarly, the registered image area 46 includes collation result data 46a, 46b, 46c in which the processed image obtained by processing the collated registered image and the matching rate are associated with each other, excluding the target registered image. The control unit 10 may arrange the collation result data 46a to 46c in descending order of the matching rate.
On the collation result screen 40, the operator determines whether or not the input stamp stamped on the billing application document is the same as the registration stamp which is the registered image registered in the registered image storage unit 22, and the matching rate and the processed image are displayed. You can check while looking at it. Therefore, the operator can focus on the matching rate and different parts, and can assist the operator in confirming whether or not the imprint is unnatural. As the registered image to be displayed, a preset representative image may be displayed when a plurality of candidates are stored, or any image may be displayed at random.

（他の表示例）
図４では、複数の登録画像との照合結果を表示するものを例に説明した。しかし、照合対象画像と、対象登録画像との照合結果のみを表示するようにしてもよい。
図５は、本実施形態に係る画像照会装置１での他の表示例を示す図である。
図５に示す照合結果画面５０は、照合対象画像領域５１と、対象登録画像領域５７と、一致率表示領域５９とを含む。照合結果画面５０は、図４に示す照合結果画面４０のうち、登録画像領域４６を除くものである。 (Other display examples)
In FIG. 4, an example of displaying collation results with a plurality of registered images has been described. However, only the collation result of the collation target image and the target registration image may be displayed.
FIG. 5 is a diagram showing another display example in the image inquiry device 1 according to the present embodiment.
The collation result screen 50 shown in FIG. 5 includes a collation target image area 51, a target registration image area 57, and a matching rate display area 59. The collation result screen 50 excludes the registered image area 46 from the collation result screen 40 shown in FIG.

照合対象画像領域５１は、照合対象画像５２を表示させるための領域である。そして、照合対象画像５２は、一部の画像が欠落した欠落箇所５２ａがある。
対象登録画像領域５７は、登録画像記憶部２２に記憶された登録画像のうち、照合対象画像５２に係る個人特定情報と同一の個人特定情報に対応付けられた登録画像を加工した加工画像５８を表示させるための領域である。加工画像５８は、照合対象画像５２の欠落箇所５２ａに対応する対応箇所５８ａが、不一致であることが分かりやすく示すように、色付けがされている。
一致率表示領域５９は、照合対象画像５２と、登録画像との一致率を表示するための領域である。 The collation target image area 51 is an area for displaying the collation target image 52. Then, the collation target image 52 has a missing portion 52a in which a part of the image is missing.
The target registered image area 57 is a processed image 58 obtained by processing a registered image associated with the same personal identification information as the personal identification information related to the collation target image 52 among the registered images stored in the registered image storage unit 22. This is an area for displaying. The processed image 58 is colored so that the corresponding portion 58a corresponding to the missing portion 52a of the collation target image 52 is clearly shown to be inconsistent.
The match rate display area 59 is an area for displaying the match rate between the collation target image 52 and the registered image.

このように、照合結果画面５０は、照合対象画像５２と、照合対象画像５２と照合する登録画像の加工画像５８とのみを、一致率と共に表示する。よって、照合対象である登録画像のみと照合するのでよい場合には、有用である。
なお、図５に示す照合結果画面５０を出力するものであれば、図３のＳ１７からＳ２０までの処理は不要である。 As described above, the collation result screen 50 displays only the collation target image 52 and the processed image 58 of the registered image collated with the collation target image 52 together with the matching rate. Therefore, it is useful when it is sufficient to collate only the registered image which is the collation target.
If the collation result screen 50 shown in FIG. 5 is output, the processes S17 to S20 in FIG. 3 are unnecessary.

このように、本実施形態の画像照会装置１によれば、以下のような効果がある。
（１）照合対象画像と、登録画像記憶部２２に記憶された登録画像との一致度合い及び照合結果データを、表示部２６に表示させる。よって、表示部２６を参照するオペレータに、照合結果を効率的に判断しやすい仕組みを提供できる。
（２）照合対象画像と照合した登録画像について、不一致箇所を加工した加工画像を出力する。よって、照合対象画像との比較がしやすい態様で表示させることができる。 As described above, the image inquiry device 1 of the present embodiment has the following effects.
(1) The display unit 26 displays the degree of matching between the collation target image and the registered image stored in the registered image storage unit 22 and the collation result data. Therefore, it is possible to provide an operator who refers to the display unit 26 with a mechanism that makes it easy to efficiently determine the collation result.
(2) For the registered image collated with the collation target image, a processed image in which the mismatched portion is processed is output. Therefore, it can be displayed in a manner that makes it easy to compare with the collation target image.

（３）登録画像記憶部２２は、登録画像を全方向に回転させた回転画像を記憶し、照合時には、回転画像を用いることで、照合処理をしやすいものにできる。
（４）照合結果として、一致率が閾値以上のものに限定して出力する。よって、照合対象画像と全く異なる登録画像については、出力させることがなく、効率的な出力をすることができる。 (3) The registered image storage unit 22 stores a rotated image obtained by rotating the registered image in all directions, and by using the rotated image at the time of collation, the collation process can be facilitated.
(4) As the collation result, only those whose matching rate is equal to or higher than the threshold value are output. Therefore, a registered image completely different from the collation target image can be efficiently output without being output.

（５）受け付けた入力画像が有する色に基づいて比較に用いる照合対象画像を抽出する。よって、色によって、比較に用いる印影情報である照合対象画像を、簡単に抽出できる。
（６）照合対象画像の個人特定情報に対応付けられた登録画像を抽出して、強調表示するので、特定した登録画像との照合結果を、確認しやすいものにできる。また、その他の登録画像との照合結果も出力するので、例えば、類似した偽造印があった場合に、その印鑑の印影との比較も出力できる。 (5) The collation target image used for comparison is extracted based on the color of the received input image. Therefore, it is possible to easily extract the collation target image, which is the imprint information used for comparison, depending on the color.
(6) Since the registered image associated with the personal identification information of the collation target image is extracted and highlighted, the collation result with the specified registered image can be easily confirmed. Further, since the collation result with other registered images is also output, for example, when there is a similar counterfeit stamp, it is possible to output a comparison with the imprint of the stamp.

以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限定されるものではない。また、実施形態に記載した効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、実施形態に記載したものに限定されない。なお、上述した実施形態及び後述する変形形態は、適宜組み合わせて用いることもできるが、詳細な説明は省略する。 Although the embodiments of the present invention have been described above, the present invention is not limited to the above-described embodiments. Moreover, the effects described in the embodiments are merely a list of the most preferable effects arising from the present invention, and the effects according to the present invention are not limited to those described in the embodiments. The above-described embodiment and the modified form described later can be used in combination as appropriate, but detailed description thereof will be omitted.

（変形形態）
（１）本実施形態では、登録画像記憶部に記憶された全ての登録画像を対象にしたものを例に説明したが、これに限定されない。例えば、登録画像記憶部に登録画像と共に、画像が表す文字列（文字データ）を予め登録しておく。そして、画像照会装置の制御部（テキスト生成手段）は、ＯＣＲ（Ｏｐｔｉｃａｌｃｈａｒａｃｔｅｒｒｅｃｏｇｎｉｔｉｏｎ）を用いた文字認識処理により、画像から文字列（テキストデータ）を抽出する。その後、制御部（絞込画像抽出手段）は、当該文字列と同様の文字列を有する登録画像のみを対象にしてもよい。そのようにすれば、照合する対象の登録画像を、照合に有効なものに制限でき、効率がよいものにできる。 (Transformed form)
(1) In the present embodiment, all the registered images stored in the registered image storage unit have been described as an example, but the present invention is not limited to this. For example, a character string (character data) represented by the image is registered in advance in the registered image storage unit together with the registered image. Then, the control unit (text generation means) of the image inquiry device extracts a character string (text data) from the image by character recognition processing using OCR (Optical character recognition). After that, the control unit (narrowed-down image extraction means) may target only registered images having a character string similar to the character string. By doing so, the registered images to be collated can be limited to those that are effective for collation, and can be made efficient.

（２）本実施形態では、印鑑の印影を照合するものを例に説明したが、これに限定されない。例えば、サインや指紋等、正しいもの（本人のもの）であることの証明に用いる他のものであってもよい。 (2) In the present embodiment, the case where the imprint of the seal is collated has been described as an example, but the present invention is not limited to this. For example, it may be something else used to prove that it is correct (the person's), such as a signature or fingerprint.

１画像照会装置
６スキャナ
１０制御部
１１入力画像受付部
１２個人特定情報受付部
１３印影抽出部
１４対象登録画像抽出部
１５画像照合部
１６加工画像生成部
１７結果画面生成部
１８照合結果出力部
２０記憶部
２１ａプログラム
２２登録画像記憶部
２３個人特定情報記憶部
２６表示部
２７入力部
４０、５０照合結果画面
１００画像照会システム 1 Image inquiry device 6 Scanner 10 Control unit 11 Input image reception unit 12 Personal identification information reception unit 13 Imprint extraction unit 14 Target registration image extraction unit 15 Image collation unit 16 Processed image generation unit 17 Result screen generation unit 18 Collation result output unit 20 Storage unit 21a Program 22 Registered image storage unit 23 Personal identification information storage unit 26 Display unit 27 Input unit 40, 50 Collation result screen 100 Image inquiry system

Claims

A registered image storage unit that stores multiple registered images,
Matching result including the matching degree of the image calculated as a result of collating the collation target image from which the imprint information is extracted from the input image with the plurality of registered images stored in the registered image storage unit, and the collation result data. Result screen generation means to generate screen data,
A collation result output means that outputs the collation result screen data generated by the result screen generation means, and a collation result output means.
An image inquiry device comprising.

In the image inquiry device according to claim 1,
A matching rate is calculated for each of the matching target image and the comparison target area which is a part of the registered image, and the image is processed by emphasizing the comparison target area with respect to the registered image according to the calculated matching rate. Equipped with a processed image generation means to generate an image
The collation result data is an image inquiry device including the collation target image and the processed image generated by the processed image generation means.

In the image inquiry device according to claim 1 or 2.
The registered image storage unit is an image inquiry device that stores a rotated image obtained by rotating the plurality of registered images in all directions in correspondence with a rotation angle based on one registered image.

In the image inquiry device according to any one of claims 1 to 3.
The result screen generation means is an image inquiry device that generates the collation result screen data including the collation result data whose degree of matching is equal to or greater than a threshold value.

In the image inquiry device according to any one of claims 1 to 4.
An input image receiving means for receiving the input image and
An imprint extracting means that extracts the imprint information based on the color of the input image received by the input image receiving means, and
An image inquiry device.

In the image inquiry device according to any one of claims 1 to 5.
A personal identification information storage unit that stores registered personal identification information that is information that identifies an individual corresponding to each registered image in association with each of the plurality of registered images stored in the registered image storage unit.
A personal identification information receiving means for receiving input personal identification information, which is information for identifying an individual corresponding to the input image, and
The personal identification information storage unit is searched based on the input personal identification information received by the personal identification information receiving means, and when there is the registered personal identification information matching the input personal identification information, the registered personal identification is performed. A target registered image extraction means for extracting the registered image associated with the information from the registered image storage unit, and
With
The result screen generation means is an image inquiry device that generates the collation result screen data by highlighting the collation result data in which the collation target image and the registered image extracted by the target registration image extraction means are collated. ..

In the image inquiry device according to claim 6,
The result screen generation means is an image inquiry device that generates the collation result screen data including only the collation result data in which the collation target image and the registered image extracted by the target registration image extraction means are collated.

In the image inquiry device according to any one of claims 1 to 5.
The registered image storage unit stores the character data indicated by the registered image in association with the registered image.
A text generation means for extracting text data by performing character recognition processing on the input image, and
The registered image storage unit is searched based on the text data extracted by the text generation means, and the registered image associated with the character data matching the text data is extracted from the registered image storage unit. Image extraction means and
With
The result screen generation means is an image inquiry device that collates the collation target image with the registered image extracted by the narrowed-down image extraction means to generate the collation result screen data.

A program for operating a computer as the image inquiry device according to any one of claims 1 to 8.